阿里云 MaxCompute 2020-12 月刊

【12月新发布功能】

1、MaxCompute 查询编辑器支持查询加速提升数据分析能力

MaxCompute 数据分析支持查询加速，当分析师通过SQL查询数据时，速度可提升至秒级，为数据分析师提供更优的数据分析体验。

适用客户及场景

数据分析师，尤其适用于数据分析师对离线数仓的数据进行取数，再通过Excel进行二次分析的场景。

发布功能

MaxCompute 数据分析查询模式支持 MaxCompute 查询加速，对于中、小数据量查询作业将执行时间从分钟级缩减至秒级。 通过 MaxCompute 查询编辑器发起查询 SQL 会优先通过查询加速进行查询，若满足则秒级返回结果，若不满足查询加速条件，则会回退离线查询，保障查询作业正常执行。

结合查询编辑器丰富的web-excel分析功能，数据分析师可通过MaxCompute数据分析快速的进行一站式数据查询、结果二次分析及结果分享。

MaxCompute查询加速功能当前支持按量计费资源，若您的项目使用包年包月资源，暂时还无法满足查询加速。

查看文档 >>


2、MaxCompute 流式数据写入服务（Streaming Tunnel）公测发布

MaxCompute Streaming Tunnel 服务，支持 API 方式实现流式数据无感知高 QPS 写入 MaxCompute。

适用客户

有实时计算Flink、数据通道DataHub、数据传输服务DTS、消息服务kafka、实时数据同步等场景的企业、机构。

发布功能

流式语义API：全新的API，简化分布式服务开发操作。
自动创建分区：支持分布式服务并发创建分区。
支持数据异步 zorder by 排序功能。

查看文档 >>


3、MaxCompute 按量计费 SQL 支持日累计消费限制

MaxCompute 发布按量计费 SQL 日累计消费限制功能，该功能可以实时监控并阻止按量计费 project 的 SQL 消费超出预算。

适用客户及场景

• 数据开发人员在数据开发过程中，通过开发项目进行数据探查、SQL测试等操作时，容易发起大输入量SQL且不能及时感知的，可通过该功能进行日累计总消费的限制。
• 数据分析师通过SQL查询取数时，容易发起大输入量的查询SQL，此时可单独划分项目给分析师取数，并通过该功能进行日累计总消费限制。

发布功能

MaxCompute 发布按量计费 SQL 日累计消费限制功能，提供对整个 Project 标准 SQL 日累计消费进行限制。

Project 内当日标准 SQL 发生的计量累计消费与正在发起的标准 SQL 预估消费总和大于设定的值，则正发起 SQL 会被限制执行，返回失败状态并给出失败信息，通过该功能阻止标准 SQ L日累计消费超出预算。

在设置前，需要充分评估日常消费量，设置合理值，避免累计消费超过设定值后导致 SQL 作业无法执行而耽误业务产出。如发现设置不合理，Project owner 或拥有 SuperAdministrator 的管理员可以随时进行调整。

查看文档 >>


4、MaxCompute 运行中作业快照 Information_Schema.Tasks 内测发布

Information_Schema.Tasks 视图提供运行中作业的详细信息，支持通过该数据接口进行实时作业监控。

适用客户

需要实时监控作业并优化资源使用的客户

发布功能

以 Information_Schema.Tasks 视图方式，提供当前运行中作业的详细信息，包括作业列表以及各作业 cpu/内存使用大小和资源占比、运行时长等信息。通过该视图，使用人员可以快速定位运行时间较长的慢作业、资源消耗高的大作业，从而有针对性地进行作业优化或资源容量规划。

查看文档 >>


5、MaxCompute 新建 Project 默认提供 Information_Schema 服务（中国区）发布

新建的Project，无需管理员手动安装，默认自动提供 Information_Schema 元数据服务，便于用户查看使用。

优化功能

创建新的 MaxCompute Project，系统将自动提供该 Project 的元数据视图，不需要管理员通过安装 Package 方式获取，Information_Schema 成为 MaxCompute 默认提供的服务内容。


MaxCompute 产品官网 >>
阅读往期月刊 >>

更多关于大数据计算产品技术交流，可扫码加入 “MaxCompute开发者社区” 钉钉群