MaxCompute,基于Serverless的高可靠大数据服务
摘要:2019年1月18日,由阿里巴巴MaxCompute开发者社区和阿里云栖社区联合主办的“阿里云栖开发者沙龙大数据技术专场”走近北京联合大学,本次技术沙龙上,阿里巴巴高级技术专家吴永明为大家分享了MaxCompute,基于Serverless的高可用大数据服务,以及MaxCompute低计算成本背后的秘密。
以下内容根据演讲视频以及PPT整理而成。
一、什么是MaxCompute
Big Data in Alibaba
首先为大家介绍阿里巴巴大数据技术的一些相关背景。正如下图所示,阿里巴巴其实在很早的时候就开始布局大数据技术,甚至可以说阿里云的成立就是为了帮助阿里巴巴解决大数据相关的技术问题。如今,阿里巴巴几乎所有的BU都在使用大数据技术。而在阿里巴巴内部,大数据技术不仅应用范围非常广,同时也非常深入。此外,整个集团的大数据体系最终都
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
2019年1月&2月云栖技术活动汇总:50+直播与Meetup资料下载
刚刚过完节日,云栖社区的线上直播和线下沙龙已经陆续展开啦,辗转之间,我们即将告别二月的寒冬,迎来三月的阳春,下面为大家汇总了一月二月份的直播和沙龙资料大全,最好的学习时机就是现在,速速收藏吧~ 阿里开发者技术社群全向图 全网首发!一站加入阿里各个技术领域的技术社群,和顶级专家面对面!键盘图详细信息,请点击这里 PostgreSQL: 线上直播: 直播主题:PostgreSQL多场景阿里云沙箱实验(第9讲):PostgreSQL 时空业务实践 直播回顾: https://yq.aliyun.com/live/794 讲师:德哥 — 阿里云数据库专家,PostgreSQL中国社区校长 学习资料: https://yq.aliyun.com/articles/683057 直播主题:PostgreSQL多场景阿里云沙箱实验(第10讲):PostgreSQL 时空调度数据库实践直播回顾: https://yq.aliyun.com/live/807讲师:德哥 — 阿里云数据库专家,PostgreSQL中国社区校长学习资料:https://yq.aliyun.com/articles/68433...
- 下一篇
【大数据】阿里巴巴的大规模数据流处理系统
随着阿里系的应用几乎覆盖了移动互联网的全行业,阿里巴巴开始致力于搭建世界一流的计算引擎。 在2015年,阿里巴巴开始将视线转向Flink,发现表现不错,于是开始将其投入到计算引擎的测试中,并定义内部名称为Blink。在随后的一年克服了稳定性和可靠性的问题;而到了2017年,就开始专注于Blink各组件性能的提升,包括SQL的功能及平台。 在Blink的生态系统中,自下而上分别是资源管理及存储、Blink运行引擎、数据流API及数据集API、统一的SQL API。在SQL API之上,阿里开发了两个平台,一个是SQL平台,允许用户使用SQL编译,或部署SQL任务;另一个平台是机器学习平台,这个平台是纯图形化UI,用户可以在界面上拖动任务或组件,以达到配置和连接的目的。有了这两大平台,就足以支撑阿里系上述的所有互联网产品。 阿里为何选择SQL作为整个平台的底层接口(Blink的上层接口)呢?SQL有以下5大特点: 通用性:各种平台的开发人员都熟悉SQL 易于理解:更易描述业务逻辑 性能优化:SQL系统的核心优化器能使任务更快捷地执行 稳定性:甚至可以平滑替换运行引擎 统一性:即可用户Bat...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- CentOS8编译安装MySQL8.0.19
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- CentOS7,CentOS8安装Elasticsearch6.8.6
- MySQL8.0.19开启GTID主从同步CentOS8
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- Windows10,CentOS7,CentOS8安装Nodejs环境