阿里云数据库资深专家林伟:大规模计算平台研究与实战

大流量高并发互联网应用实践在线峰会官网:https://yq.aliyun.com/activity/112

峰会统一报名链接:http://yq.aliyun.com/webinar/join/49


议题名称:《大规模计算平台研究与实战》

议题简介:MaxCompute是由阿里云自主研发,是阿里巴巴自主研发的海量数据处理平台。能够在多个单机群达万台跨集群的计算平台上提供针对TB/PB/EB级数据分布式处理能力,应用于数据分析、挖掘、商业智能等领域。提供海量数据仓库的解决方案以及针对大数据的分析建模服务。支持阿里巴巴和蚂蚁金服绝大多数计算分析任务。本次演讲向大家介绍MaxCompute中的在面对超大规模的活动中如何满足阿里巴巴上万用户不同计算任务在延时,性能,规模上不同需求并在全局做到低成本,高性能,高弹性,高可用。 同时如何能够在保证高可用的计算服务和用户数据的安全性下能够持续发布改进计算平台。

演讲要点: 

  1. 伏羲资源调度和多租户管理 
  2. 分布式场景中的查询优化 
  3. 基于历史数据的优化 
  4. 跨集群计算使得计算突破单机群限制 
  5. 大规模计算平台如何进行持续改进和发布  

关于分享者

林伟,阿里云数据库资深专家林伟,阿里云大数据计算平台MaxCompute首席架构师。该系统目前支撑了阿里巴巴、蚂蚁金服集群绝大多数计算任务。具有大规模并发系统有10年以上的系统架构设计及研发经验,并在国际一流ODSI、NSDI、SIGMOD会议上多次发表论文。

更多大会议题,请参见官网:https://yq.aliyun.com/activity/112

优秀的个人博客,低调大师

微信关注我们

原文链接:https://yq.aliyun.com/articles/59221

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

相关文章

发表评论

资源下载

更多资源
Oracle Database,又名Oracle RDBMS

Oracle Database,又名Oracle RDBMS

Oracle Database,又名Oracle RDBMS,或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统,系统可移植性好、使用方便、功能强,适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Apache Tomcat7、8、9(Java Web服务器)

Apache Tomcat7、8、9(Java Web服务器)

Tomcat是Apache 软件基金会(Apache Software Foundation)的Jakarta 项目中的一个核心项目,由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定,而且免费,因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可,成为目前比较流行的Web 应用服务器。

Eclipse(集成开发环境)

Eclipse(集成开发环境)

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。幸运的是,Eclipse 附带了一个标准的插件集,包括Java开发工具(Java Development Kit,JDK)。

Java Development Kit(Java开发工具)

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包,主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心,它包含了JAVA的运行环境(JVM+Java系统类库)和JAVA工具。