Flink 在快手实时多维分析场景的应用-低调大师

Flink 在快手实时多维分析场景的应用

2020-06-16 850

作者：董亭亭、徐明

摘要：作为短视频分享跟直播的平台，快手有诸多业务场景应用了 Flink，包括短视频、直播的质量监控、用户增长分析、实时数据处理、直播 CDN 调度等。此次主要介绍在快手使用 Flink 在实时多维分析场景的应用与优化。主要内容包括：

Flink 在快手应用场景及规模

快手实时多维分析平台

SlimBase-更省 IO、嵌入式共享 state 存储

Tips：点击下方链接可查看作者原版PPT及分享视频～
https://ververica.cn/developers/flink-forward-asia-2019/

Flink 在快手应用场景及规模

首先看 Flink 在快手的应用场景和规模。

1. 快手应用场景

快手计算链路是从 DB/Binlog 以及 WebService Log 实时入到 Kafka 中，然后接入 Fli

微信关注我们

原文链接：https://yq.aliyun.com/articles/765320

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2020-06-17 00:00:00

新一代企业操作系统：专属钉钉解决方案全新上线

6月17日，在阿里云新品发布会上，阿里云宣布专属钉钉解决方案正式上线。专属钉钉解决方案是阿里云同钉钉联手打造的新一代企业数字化办公操作系统。通过同上千家企业在企业数字化办公上的探讨，专属钉钉解决方案为企业用户特别设计开发了专属设计、专属安全、专属开放能力。同时，专属钉钉解决方案通过阿里云产品，进一步深化钉钉在组织在线、沟通在线、协同在线、业务在线、生态在线上的能力，成为企业全新一代的安全、高效的企业数字化操作系统。目前，专属钉钉解决方案已在金融、零售、地产、制造、教育等行业打造诸多标杆。钉钉解决方案中心总监司酒在发布会中介绍了专属钉钉在各个行业的成功案例。司酒表示，“专属钉钉同时拥有钉钉本身高效的IM、协同能力，和大企业需要的高安全性，同时还提供高度开放的自定义业务空间。将专属钉钉作为企业数字化操作系统，将大大提升企业沟通、协同和

638

2020-06-17 00:00:00

数仓大法好！跨境电商 Shopee 的实时数仓之路

作者：黄良辉本文讲述 Flink 在 Shopee 新加坡数据组（Shopee Singapore Data Team）的应用实践，主要内容包括：实时数仓建设背景 Flink 在实时数据数仓建设中结合 Druid、Hive 的应用场景实时任务监控 Streaming SQL 平台化 Streaming Job 管理未来规划优化方向建设背景 Shopee 是东南亚与台湾领航电商平台，覆盖新加坡、马来西亚、菲律宾、台湾、印度尼西亚、泰国及越南七大市场，同时在中国深圳、上海和香港设立跨境业务办公室。 Shopee在2020年第一季的总订单量高达4.298亿，同比增长111.2%。根据App Annie， Shopee在 2020年第一季强势跻身全球购物类 App下载量前三名。同时斩获东南亚及台湾市场购物类 App 年度总下载量、平均月活数、安卓使

1051

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Oracle Database，又名Oracle RDBMS

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。