美团点评基于Flink的实时数仓建设实践
近些年,企业对数据服务实时化服务的需求日益增多。本文整理了常见实时数据组件的性能特点和适用场景,介绍了美团如何通过 Flink引擎构建实时数据仓库,从而提供高效、稳健的实时数据服务。本文主要阐述使用Flink在实际数据生产上的经验。在实时数据系统建设初期,由于对实时数据的需求较少,形成不了完整的数据体系。我们采用的是“一路到底”的开发模式:通过在实时计算平台上部署 Storm作业处理实时数据队列来提取数据指标,直接推送到实时应用服务中。
用户评论
推荐下载
-
Flink入门读取Kafka实时数据流实现WordCount
本文主要介绍Flink接收一个Kafka文本数据流,进行WordCount词频统计,然后输出到标准输出上。通过本文你可以了解如何编写和运行Flink程序。 代码拆解 首先要设置Flink的执行环境:
21 2021-01-15 -
基于实时数据库基于实时数据库PI PI的企业实时监控
基于实时数据库基于实时数据库PIPI的企业实时监控
72 2019-08-13 -
美团点评技术沙龙第34期聊聊酒店系统高可用架构实践.pdf
美团点评技术沙龙第34期:聊聊酒店系统高可用架构实践
7 2020-07-22 -
美团配送系统架构演进实践
本文来自于网络,文章主要介绍在配送业务的快速发展下,美团配送系统架构的三个阶段的演进过程。 美团配送自成立以来,业务经历了多次跨越式的发展。业务的飞速增长,对系统的整体架构和基础设施提出了越来越高的要
29 2021-01-31 -
美团点评技术沙龙第34期4李磊美团住宿订单高可用实战.pdf
美团点评技术沙龙第34期:4-李磊-美团住宿订单高可用实战
12 2020-07-24 -
大数据flink实时计算系统实践
大数据flink实时计算系统实践 有效小伙伴快来下载 小象学院版
45 2019-02-27 -
实时数仓你需要的是一款强大的OLAP引擎
在开源盛世的今天,实时数仓的建设业界已经有了成熟的方案。技术选型上实时计算、消息队列都有最优解,唯独在 OLAP领域,百家争鸣,各有所长。 大数据领域开源OLAP引擎包括不限于Hive、Hawq、Pr
15 2021-01-31 -
Leaf美团点评分布式ID生成系统
在复杂分布式系统中,往往需要对大量的数据和消息进行唯一标识。如在美团点评的金融、支付、餐饮、酒店、猫眼电影等产品的系统中,数据日渐增长,对数据分库分表后需要有一个唯一ID来标识一条数据或消息,数据库的
16 2021-02-01 -
美团点评2020系统开发方向笔试题.docx
美团点评2020系统开发方向笔试题.docx
13 2020-09-17 -
安卓仿大众点评美团下拉菜单
安卓仿大众点评、美团下拉菜单
24 2020-10-07
暂无评论