流批一体架构在快手的实践和思考|行业实践专栏上线

Flink-learning 学训平台和互娱行业实践专栏来啦!

为帮助开发者更全面和深入地了解 Flink 技术如何在实际生产场景中落地。本期课程涵盖 6 位互娱行业实时计算领域专家详细解读 Flink 在快手、爱奇艺、小红书、B 站、BIGO、斗鱼等企业内的应用与落地。围绕业务场景、业务痛点、面临挑战、如何破局等宝贵实践经验倾囊相授。

精彩抢先看

快手的离线作业数目已经达到了 3000 个,覆盖了机器学习、数据集成、离线生产等多个业务场景。

「Hive/Spark 的任务迁移到 Flink。这个工作主要用来推演哪些场景比较适合用 Flink Batch,以及验证 Flink Batch 的稳定性。对于迁移的用户来说,稳定性是基本条件,性能需要持平/差距不大。目前验证了在简单的 ETL 场景下,Flink Batch 的稳定性、易用性、性能、Hive 语法兼容方面都是达到生产可用的水平的。」

-- 节选自《流批一体架构在快手的实践和思考》张静@快手

参与方式

长按下图扫码,登录 Flink-learning 学训平台,加入学习

随时记录学习进度,真实走进大量来自不同领域公司的生产实践案例和经验,帮助大家更好的理解和使用 Apache Flink。

猜你喜欢

转载自blog.csdn.net/weixin_44904816/article/details/130838304