【MaxCompute季报】MaxCompute新功能发布 2018Q4
2018年Q4 MaxCompute发布了一系列新功能。 本文对主要新功能和增强功能进行了概述。
- SQL功能增强:
- Grouping Sets 多维聚合分析 (CUBE and ROLLUP)
- GROUPING 和 GROUPING_ID 函数
- UDF和外表功能增强
- SQL语言支持:
- 数据集交集和补集
- Java UDX类型系统增强
- SQL性能优化:
- 支持Correlated Shuffle优化
- 支持动态并行度(Dynamic Parallelism)设定
- Lightning、Spark on MaxCompute正式开通计费
- 历史发布查看:
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
通过WebUI查看Structured Streaming作业统计信息
1. 前言 从EMR-3.18.1版本开始,EMR将提供Spark Streaming SQL预览版功能。本次作为新特性的一部分,EMR将扩展现有Spark WebUI,支持Structured Streaming Query的统计信息查看。 2. 功能介绍 2.1Query列表 我们在现有Spark WebUI上新增了streamingsql Tab,用于展示当前作业中进行中以及完成的Streaming Query。 URL地址:http://${baseUrl}/streamingsql Active Streaming Queries:当前正在运行的query Completed Streaming Queries:已完成的query,包括结束的和失败的
- 下一篇
准实时异常检测系统
案例与解决方案汇总页:阿里云实时计算产品案例&解决方案汇总 本文为您介绍利用实时计算设计准实时(延迟在100ms以内)异常检测系统。 背景介绍 比如一家银行要做一个实时的交易检测,判断每笔交易是否是正常交易:如果用户的用户名和密码被盗取,系统能够在盗取者发起交易的瞬间检测到风险来决定是否冻结这笔交易。这种场景对实时性的要求非常高,否则会阻碍用户正常交易,所以叫做准实时系统。 由于行动者可能会根据系统的结果进行调整,所以规则也会更新,实时计算和离线的处理用来研究规则是否需要更新以及规则如何更新。 准实时异常检测系统架构与模块综述 准实时异常检测系统架构: 在线系统:完成在线检测功能,可以是Web服务的形式: 针对单条事件进行检测。 根据全局上下文进行检测,比如全局黑名单。 根据用户画像或近期一段时间的信息进行检测,比如最近20次交易时间与地
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- SpringBoot2全家桶,快速入门学习开发网站教程
- SpringBoot2初体验,简单认识spring boot2并且搭建基础工程
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- CentOS关闭SELinux安全模块
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- CentOS7设置SWAP分区,小内存服务器的救世主
- SpringBoot2整合Thymeleaf,官方推荐html解决方案