阿里云 MaxCompute 2020-10 月刊
【10月新功能发布】
1、MaxCompute 支持 sort by 不带 distribute by
MaxCompute 支持 sort by 不带 distribute by,提供数据重排的解决方案,提高SQL执行的过滤性能。
适用客户
开发者
发布功能
MaxCompute 支持不带 distribute by 的sort by,提供数据重排的解决方案,提高谓词下推的过滤性能。当 sort by 语句前没有 distribute by 时能够增加
存储压缩率,同时读取的时候如果有过滤,能够利用这个信息减少真正从磁盘读取的数据量,提高后面进行的全局排序的效率。
查看文档 >>
2、SEMI JOIN 支持 MAPJOIN Hint
SEMI JOIN支持MAPJOIN Hint,提高 LEFT SEMI/ANTI JOIN的性能,为数据倾斜问题提供解决方案。
适用客户
开发者,分析师
发布功能
当一个大表和一个或多个小表JOIN时,用户可以在SELECT语句中显式指定MAPJOIN Hint以提升查询性能。目前MAPJOIN Hint进一步支持 LEFT SEMI JOIN和LEFT ANTI JOIN, 可以提高SEMI JOIN的性能,同时也为数据倾斜问题提供解决方案。
查看文档 >>
3、OSS外部表CSV/TSV文件支持GBK编码格式
OSS外部表CSV/TSV文件支持GBK编码格式。
适用客户
开发者
发布功能
OSS 外部表 odps.text.option.encoding 原先支持三种格式:UTF-8/UTF-16/US-ASCII,在新版本中增加了对GBK编码格式的支持。
查看文档 >>
4、批量 Drop Partition 支持条件筛选
使用条件表达式匹配选中的分区进行批量删除,满足用户希望一次删除符合某个规则的一个或多个分区的需求。
适用客户
开发者、数据仓库管理员
发布功能
支持条件筛选方式删除分区。如果用户希望一次性删除符合某个规则条件的一个或多个分区,可以使条件表达式匹配选中的分区进行批量删除。
查看文档 >>
5、MaxCompute 新增支持更多内置函数
新增 WIDTH_BUCKET 函数,时间函数 year/quarter/month 等对 DateTime 输入数据类型的支持。
适用客户
开发者、数据分析师
发布功能
WIDTH_BUCKET函数:获取某个字段值落入的分组编号,设定分组范围的最小值和最大值,以及分组个数,构建指定个数的大小相同的分组,返回字段值落
入的分组编号。
时间函数 year/quarter/month/day/hour/minute/second 增加对DateTime输入数据类型的支持 - 增加如下内建函数接口:
• INT year(datetime date)
• INT quarter(datetime date)
• INT month(datetime date)
• INT day(datetime date)
• INT hour(datetime date)
• INT minute(datetime date)
• INT second(datetime date)
查看文档 >> 查看文档 >>
6、MaxCompute 写表支持Zorder by语句
增加 SQL DML的 zorder by 语句,支持把数据相近的行排列在一起,提升查询时的过滤性能,一定程度上降低存储成本。
适用客户
开发者、数据分析师
发布功能
增加 SQL DML 的 zorder by 语句,支持DML语句的方式把数据相近的行排列在一起,提升查询时的过滤性能,一定程度上降低存储成本。
查看文档 >>
阅读往期月刊 >>
MaxCompute 产品官网 >>
免费下载《SaaS模式云数据仓库手册》>>
更多关于大数据计算产品技术交流,可扫码加入 “MaxCompute开发者社区” 钉钉群
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
在针对零售商的CMX软件中发现了十分严重的Cisco漏洞
思科修复了67个CVE严重漏洞,其中包括在AnyConnect安全移动客户端和RV110W、RV130、RV130W和RV215W小型企业路由器中发现的漏洞。 思科针对零售商的智能Wi-Fi解决方案中存在一个非常严重的漏洞,远程攻击者可以通过该漏洞更改受影响系统上任何用户的帐户密码。 该漏洞是思科在周三发布的针对67个高危CVE的一系列补丁的一部分,其中包括Cisco的AnyConnect安全移动客户端以及Cisco RV110W,RV130,RV130W和RV215W小型企业路由器中发现的漏洞。 最严重的漏洞存在于Cisco Connected Mobile Experiences(CMX),这是一种软件解决方案,零售商利用它来进行业务或现场客户体验分析。该解决方案使用思科无线基础设施,从零售商的Wi-Fi网络收集大量数据,包括实时客户位置跟踪。 例如,如果客户连接到使用CMX的商店的Wi-Fi网络,则零售商可以跟踪他们在场所内的位置,观察他们的行为,并当他们在店里的时候向他们提供特别优惠或促销。 该漏洞(CVE-2021-1144)是由于更改密码的授权检查处理不正确造成的,这个漏洞...
- 下一篇
阿里云 MaxCompute 2020-11 月刊
【11月新功能发布】1、MaxCompute支持以RAM角色身份访问使用服务 在云账号、RAM用户基础上,支持以RAM角色身份访问服务,满足跨云服务的安全数据交换以及与企业已有身份系统实现SSO对接访问需求。 适用客户已自建身份系统需要以Role-Based SSO方式与阿里云服务对接的企业利用RAM角色使用其他云服务安全读写MaxCompute的企业 发布功能① MaxCompute项目空间在云账号、RAM用户基础上,增加对RAM角色的支持。管理员可添加RAM角色到项目空间并对RAM角色赋权,通过STS认证方式登录访问服务,实现无AK认证的安全访问需求;② MaxCompute Web控制台支持以STS访问认证,使用Ram角色在web控制台操作访问MaxCompute项目空间,进行数据分析、数据开发。 查看文档 >> 2、MaxCompute支持消息队列Kafka版通过Connector持续导入数据 消息队列Kafka版发布MaxCompute Sink Connector,无需开发实现Kafka数据持续导入MaxCompute。 适用客户使用消息队列Kafka版和Max...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
-
Docker使用Oracle官方镜像安装(12C,18C,19C)
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- CentOS8编译安装MySQL8.0.19
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- MySQL8.0.19开启GTID主从同步CentOS8
- CentOS7,8上快速安装Gitea,搭建Git服务器
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
推荐阅读
最新文章
- CentOS6,CentOS7官方镜像安装Oracle11G
- Windows10,CentOS7,CentOS8安装Nodejs环境
- CentOS8编译安装MySQL8.0.19
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- 设置Eclipse缩进为4个空格,增强代码规范
- CentOS7,8上快速安装Gitea,搭建Git服务器
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- CentOS7安装Docker,走上虚拟化容器引擎之路
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题