实时计算Flink——快速入门概述-低调大师

实时计算Flink——快速入门概述

2018-11-13 836

文本提供了一个安全监控作业案例，来帮助您了解实时计算开发流式作业。

安全监控背景介绍

随着科技的进步，数据的安全越来越被世人所关注，安全实时监控报警尤为重要。但是怎样在同时保证数据的正确性和实效性的前提下，在流式的数据里做实时监控报警呢？阿里云实时计算 Flink SQL团队对这一难题做出了攻克，将流式数据的源表和黑名单的维表进行实时JOIN。

以下案例是对实时监控报警的诠释。

安全监控业务架构图

作业操作流程

作业操作具体步骤如下。

步骤一：购买订单，绑定订单创建项目。
步骤二：注册上下游存储。
步骤三：数据开发，作业上线。
步骤四：生产运维。

本文转自实时计算——快速入门概述

微信关注我们

原文链接：https://yq.aliyun.com/articles/669087

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

G7在实时计算Flink的探索与实践

G7业务快览# G7主要通过在货车上的传感器感知车辆的轨迹、油耗、点熄火、载重、温度等数据，将车辆、司机、车队、货主连接到一起，优化货物运输的时效、安全、成本等痛点问题。整个数据是通过车载的传感器设备采集，比如公司的Smart盒子，CTBox盒子，油感设备，温度探头等，将车辆数据上报到后端平台，在后端平台计算和处理，最后展示到用户面前。 G7的业务场景是典型的IoT场景： 1.传感器数据 2.数据种类多 3.数据质量差 4.数据低延迟 5.数据量大其中，数据质量差的原因是整个链条会非常的长，从传感器采集的车辆的数据，通过网络运营商将数据上报到后端服务器，再经过解析，mq，过滤，调用三方接口，业务处理，入库，整个过程非常的长，造成数据在传输过程中出现数据重复，数据缺失等。另外一点，IoT场景需要数据传输的延迟非常低，比如进出区域报警，当车辆进入到某个电子围栏中的时候需要触发报警，这个时候需要快速产生报警事件，通常不能超过30s，否则时间太长车辆已经通过了某个电子围栏区域再报警就没有价值了。再一个，数据量也是非常大的，现在每天产生轨迹点20亿+，每天产生数据量100亿+，对计算性能的要...

2018-11-13

542

在一片欢呼之中，2018年的双十一完美收官，各项数据不出意外的刷出了新的记录，亮眼的数据背后是阿里过硬的技术支撑。其中阿里云Redis不仅保障了阿里集团内部业务双十一的流量洪峰平稳度过，也让使用阿里云Redis的各个客户度过了一个安稳省心的双十一。目前阿里云Redis涵盖了丰富的产品形态：主从、集群、读写分离、同城容灾、异地多活，可以选择单副本，双副本，还有混合存储类型。主从规格的Redis具有100%的兼容性；读写分离增加只读节点承担读流量，成本最优；集群规格大容量、高性能，突破单机性能极限，兼容redis cluster, sentinel等多种架构，上云无忧；同城容灾双机房部署，整机房故障切换到正常机房；异地多活让业务全球部署，就近写入，自动全球实时同步。此外，阿里云Redis还拥有热备份、账号、安全等功能，满足业务的各项安

2018-11-13

628

资源下载

更多资源

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。