阿里云计算能力再次飞跃 流计算2.0每秒峰值达千万QPS
【大咖・来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》
10月12日,阿里巴巴集团副总裁周靖人在云栖大会上发布了阿里云在大数据计算能力上的新突破:将BigBench数据规模扩展到100T;流计算2.0每秒峰值达千万QPS,整体链路延时亚秒级;E-MapReduce对比同类产品平均性能提升3倍。
周靖人说,数据是机器智能创新的基础,拥有充沛的计算能力才能全面释放数据的价值。我们希望通过不断的释放阿里云的计算红利,帮助开发者抓住更多市场机遇。
BigBench全球***达到100TB
TPCx-BigBench是大数据端到端真实复杂的业界领先测试基准,目前,TPC官网公布的测试***规模为10TB,***性能是1491.23BBQpm。
当天,阿里云与Intel合作,在***的Intel硬件上,基于公共云发布的BigBench On MaxCompute+PAI,全球***将规模拓展到100TB,达到7000 BBQpm,也是***基于公共云服务的Benchmark。
据介绍,大会结束后,MaxCompute会在公共云开放一个月的测试环境,并开源BigBench On MaxCompute+PAI的SDK(继承自TPCx-Bigbench,并使之运行在阿里云的大数据环境上),供开发者验证试用。
在规模上的优秀表现,得益于MaxCompute的海量数据处理能力和机器学习算法高效性,MaxCompute基于阿里云自主研发的分布式操作系统飞天,单集群服务器规模可以达到万台以上,数据规模达到EB级。
在性能上,MaxCompute新一代处理引擎从Compiler、Optimizer、Runtime等模块进行的持续深度优化。此外,MaxCompute与Intel开展深度合作,软硬结合深度优化。
英特尔数据中心事业部副总裁Robert Hays - ”我们非常高兴能够和阿里云共同在***的英特尔® 至强® 可扩展处理器平台上对MaxCompute进行深度优化,并见证阿里云MaxCompute在BigBench测试中表现出的优异成绩“。
更快的流计算StreamCompute 2.0
在流计算方面,周靖人透露将于10月底在公共云发布新的版本。StreamCompute 2.0基于Apache Flink,并为开源社区提供了大量阿里内部的改进和优化。
新版流式计算2.0的特点包括:
1. 高吞吐低时延处理能力,单作业峰值达数千万的QPS,相比于StreamCompute 1.0有10+倍提升
2. SQL化的流式分析语言,由阿里巴巴计算事业部实时计算团队主导开发并回馈社区的BlinkSQL;BlinkSQL支持完备的流式处理语义,支持包括多种窗口、乱序容忍、完整DDL支持
3. 精准的数据处理语义,提供Exactly-once处理语义,同时为减少磁盘IO,提供增量CheckPoint,优化存储空间。
E-MapReduce性能3倍提升
E-MapReduce产品是阿里云上基于开源大数据的云服务产品,包括15+个开源组件的一站式大数据解决方案。周靖人现场发布了基于本地硬盘以及计算存储分离的大数据解决方案。
周靖人介绍,为了解决大数据处理以及机器学习的统一调度难题,E-MapReduce产品实现了CPU/GPU的混合调度方案,使得数据预处理以及数据训练可以在一个平台上解决。
E-MapReduce对于数据读写的性能至关重要,产品通过对于对象存储OSS的优化,使得读写OSS的性能是同类产品的3倍,对于计算和存储分离的大数据解决方案的产品化形式变得可以落地。
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
阿里云李津:持续释放技术红利,为1000万企业提供技术平台
【大咖・来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 10月12日,在2017杭州·云栖大会上阿里云宣布,未来将为1000万家企业提供智能时代的技术平台。阿里云副总裁李津表示:”2017年,阿里云8年的时候,80%的创新企业在阿里云上。再过八年,如果80%的企业创新都会在阿里云上。中国会迎来真真正正的完整的云上的时代“。 据了解,8年来阿里云为客户提供了124个产品,产品新功能每天都有在云端更新。在全球得到了超过100万客户的采用,遍及67多个国家和地区,覆盖了34%的中国500强企业。 阿里云副总裁李津表示,降价从来不是目的。阿里云一直致力于核心技术研发,提升资源利用率,扩大云计算规模效应,打造高性价比的云服务。“我们希望通过不断的技术进步和资源优化,把这些技术红利和所有人分享,降低创新门槛,不断提升社会效率”。 为满足不同客户对计算的个性化需求,阿里云发布了ECS第二代入门级实例T5。和前代的入门级实例不同,T5能够提供明确性能基线SLA,适用于成本敏感,偶有突发短时间峰值负载而日常负载需求不高的场景。 与此同时,阿里云还升级了窄带高清技术2.0版本。这是一套以人...
- 下一篇
2017杭州·云栖大会第二天:阿里云发布了这些“黑科技”
【大咖・来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 【51CTO.com原创稿件】时至今日,云栖大会已有八个年头,本次大会主题是“飞天·智能”, 自10月11日开始,为期四天。由杭州市人民政府、阿里巴巴集团、蚂蚁金服集团联合主办,来自全世界67个国家和地区的嘉宾参会。官方表示,约有450家科技企业参展,集中展示人工智能、视觉智能、芯片计算、量子计算、云计算、大数据、无人驾驶、智能家居、城市管理等领域的***科技创新成果。 10月12日,阿里云宣布,未来将为1000万家企业提供智能时代的技术平台。阿里云副总裁李津表示:”2017年,阿里云8年的时候,80%的创新企业在阿里云上。再过八年,如果80%的企业创新都会在阿里云上。中国会迎来真真正正的完整的云上的时代“。 据悉,8年来阿里云为客户提供了124个产品,产品新功能每天都有在云端更新。在全球得到了超过100万客户的采用,遍及67多个国家和地区,覆盖了34%的中国500强企业。 如下内容是阿里云在本次云栖发布一些新产品 一:神龙云服务器 阿里云发布了全新一代的计算类服务器产品--神龙云服务器(X-Dragon Clou...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- Linux系统CentOS6、CentOS7手动修改IP地址
- CentOS7安装Docker,走上虚拟化容器引擎之路
- CentOS8编译安装MySQL8.0.19
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- CentOS7,CentOS8安装Elasticsearch6.8.6
- SpringBoot2整合Redis,开启缓存,提高访问速度
- CentOS8安装MyCat,轻松搞定数据库的读写分离、垂直分库、水平分库
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题