基于 HBase 做 Storm 实时计算指标存储
Hi，大家好！我是祝威廉，本来微博也想叫祝威廉的，可惜被人占了，于是改名叫·祝威廉二世。然后总感觉哪里不对。目前在乐视云数据部门里从事实时计算，数据平台、搜索和推荐等多个方向。曾从...
实时计算
棱镜：分布式实时计算的跟踪校验系统
该文章来自于阿里巴巴技术协会（ATA）精选文章。摘要：*目前，各种分布式实时计算系统已经在各大互联网公司得到了广泛应用。但是，这些实时系统的计算过程多不进行持久化，如果出现消息丢失...
斗鱼实时计算平台的演进
我是吴瑞诚，来自斗鱼，很高兴能有机会和大家分享斗鱼TV实时计算平台的演进。 做一个简单的自我介绍。我之前在淘宝干过三年，主要做HBase，目前在斗鱼TV做大数据开发。 斗鱼典型直播...
从 Storm 到 Heron，Twitter 的实时计算框架有哪些重大进化？
本文是6月3日大数据杂谈群分享的内容。 关注“大数据杂谈”公众号，点击“加群学习”，更多大牛一手技术分享等着你。 实习编辑：Melody 回复关键词【heron】下载PPT 大家好...
实时计算平台中的弹性集群资源管理
本文系微博运维数据平台（DIP）在实时计算平台的研发过程中集群资源管理方面的一些经验总结和运用，主要关注以下几个问题：异构资源如何整合？实时计算应用之间的物理资源如何隔离？集群资源...
[译] 实时计算和数据转换，为何 Yelp 弃用 Storm 和 Heron，自建流处理器 PaaStorm？
美中不足 在2010年时，Yelp开源了一个名叫MRJob的框架，是用来在AWS基础设施上运行大MapReduce Job的。Yelp的工程师们用MRJob实现了很多功能，从广告推...
团
团
团
实时计算工具库 stream-lib 使用指南
进行大数据处理时，计算唯一值、95% 分位数等操作非常占用空间和时间。但有时我们只是想对数据集有一个概略的了解，数值的准确性并不那么重要。实时监控系统中也是如此，可以容忍一定的错误...
如何基于 Spark Streaming 构建实时计算平台？
前言 随着互联网技术的迅速发展，用户对于数据处理的时效性、准确性与稳定性要求越来越高，如何构建一个稳定易用并提供齐备的监控与预警功能的实时计算平台也成了很多公司一个很大的挑战。 自...
一文揭秘阿里实时计算 Blink 核心技术：如何做到唯快不破？
阿里妹导读：本文主要讲解阿里巴巴实时大数据和相关的机器学习技术，以及这些技术如何实现大数据升级，最终取得卓越的双11战果。 分享嘉宾大沙，阿里巴巴高级技术专家，负责实时计算Flin...
Spark Streaming 实时计算在链家网的实践
张智源，数据智能部，16年10月加入链家，先后负责设计实现大数据权限平台、实时计算平台，专注于大数据生态圈技术研究。 背景 随着链家业务的快速发展，对于数据处理的时效性、准确性、稳...
团
滴滴是如何从零构建集中式实时计算平台的？
滴滴出行作为一家出行领域的互联网公司，其核心业务是一个实时在线服务。因此具有丰富的实时数据和实时计算场景。本文将介绍滴滴实时计算发展之路以及平台架构实践。/01/实时计算演进随着滴...
实时计算最佳实践：基于表格存储和 Blink 的大数据实时计算
表格存储: 数据存储和数据消费All in one表格存储（Table Store）是阿里云自研的NoSQL多模型数据库，提供PB级结构化数据存储、千万TPS以及毫秒级延迟的服务...
团
阿里巴巴开源的 Blink 实时计算框架真香
Blink 开源了有一段时间了，竟然没发现有人写相关的博客，其实我已经在我的知识星球里开始写了，今天来看看 Blink 为什么香？我们先看看 Blink 黑色版本： 对比下 F...
团
[译] 使用 Redis Bitamp 简单快速实时计算指标
传统上，度量指标一般由批处理作业执行（每小时运行，每天运行等）。Redis 中的 Bitmap 可以允许我们实时计算指标，并且非常节省空间。在1.28亿用户场景中，经典度量指标（如...
G7 在实时计算的探索与实践
本文主要分享 Apache Flink 在 G7 的应用实践，从实时计算选型、业务应用案例、实时计算平台开发和现状以及未来规划等部分讲解。1. G7 业务快览G7 主要通过在货车上...
你公司到底需不需要引入实时计算引擎？
前言 先广而告之，本文摘自本人《大数据重磅炸弹——实时计算框架 Flink》课程第二篇，内容首发自我的知识星球，后面持续在星球里更新，这里做个预告，今晚 12 点后涨价至 199。...
Flink 在实时计算中的应用场景
大数据计算分为离线计算和实时计算，离线计算就是我们通常说的批计算，代表是Hadoop MapReduce、Hive等大数据技术，实时计算也被称作流计算，代表是Storm、Spark...
一文让你彻底了解大数据实时计算引擎 Flink
前言在上一篇文章 你公司到底需不需要引入实时计算引擎？ 中我讲解了日常中常见的实时需求，然后分析了这些需求的实现方式，接着对比了实时计算和离线计算。随着这些年大数据的飞速发展，也出...
实时计算引擎在贝壳的应用与实践
文章作者：王磊 贝壳 大数据工程师编辑整理：安小宏内容来源：DataFun Talk出品社区：DataFun注：欢迎转载，转载请在留言区内留言。导读：本次分享的主题为实时计算引擎在...
日均百亿级日志处理：微博基于 Flink 的实时计算平台建设
来自：DBAplus社群作者介绍吕永卫，微博广告资深数据开发工程师，实时数据项目组负责人。黄鹏，微博广告实时数据开发工程师，负责法拉第实验平台数据开发、实时数据关联平台、实时算法特...
数据吞吐量高达 800 亿条！实时计算在贝壳找房的应用实践
摘要：本文由贝壳找房实时计算负责人刘力云分享，主要内容为 Apache Flink 在贝壳找房业务中的应用，分为以下三方面：业务规模与演进Hermes 实时计算平台介绍未来发展与规...
