王坚十年前的坚持，才有了今天世界顶级大数据计算平台MaxCompute-低调大师

王坚十年前的坚持，才有了今天世界顶级大数据计算平台MaxCompute

2019-04-03 734

如果说十年前，王坚创立阿里云让云计算在国内得到了普及，那么王坚带领团队自主研发的大数据计算平台MaxCompute则推动大数据技术向前跨越了一大步。

数据是企业的核心资产，但十年前阿里巴巴的算力已经无法满足当时急剧增长数据量的需求。基于Hadoop搭建集群是当时解决大规模数据计算的主流方案，Hadoop生态已经比较成熟，而且在规模上也可以解决当时阿里遇到的性能瓶颈。但刚加入阿里的王坚却另辟蹊径，决定自研一个大数据计算平台，也就是今天的MaxCompute。

但王坚看到，当时淘宝的业务还在快速增长，如果用Hadoop搭建的计算平台会再次遇到挑战，更别提为外部企业提供算力。

也正是因为这一坚持，才有了今天EB级的大数据计算平台MaxCompute。过去十年，MaxCompute打破了多个记录：2013年，突破了单集群内5000台服务器同时计

微信关注我们

原文链接：https://yq.aliyun.com/articles/696850

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

普通程序员，如何转为当前紧缺的大数据相关人才？

对于程序员来说，技术进步大大超过世人的想象，如果你不跟随时代进步，就会落后于时代。我其实已经听过很多人跟我说过类似的话。只不过不同人嘴里提到的词汇各有不同——大数据、数据挖掘、机器学习、人工智能…… 这些当前火热的概念各有不同，又有交叉，总之都是推动我们掌控好海量数据，并从中提取到有价值信息的技术。自己建的大数据学习交流群:199427210，群里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入,大家都是软件开发党，不定期分享干货（只有大数据软件开发相关的），包括我自己整理的一份最新的大数据进阶资料和高级开发教程，欢迎进阶中和进想深入大数据的小伙伴加入。程序员对这些技术跃跃欲试，「普通程序员如何向人工智能靠拢？」等问题都有很高的关注度。我们在招聘市场也能够看到，越来越多的技术候选人在跳槽时会思考，能否从事相关岗位的工作。从 100offer 平台上的数据来看，大数据相关职位的面试邀请占比也与日俱增。当前，很多候选人对大数据相关岗位的青睐并非偶然处理器速度的加快，大规模数据处理技术的日渐成熟，让我们从 Big Data 中快速提取有价值的信息成为可能。几十年前神经网络算...

2019-04-04

666

Hadoop大数据生态系统重要的2个框架Apache Hive和Impala，用于在HDFS和HBase上进行大数据分析。但Hive和Impala之间存在一些差异--Hadoop生态系统中的SQL分析引擎的竞争。本文中我们会来对比两种技术Impala vs Hive区别？ Hive介绍 Apache Hive™是开源的数据仓库框架，基于Hadoop构建，使用SQL语法读取Hadoop数据，分析保存在分布式存储中HDFS或者HBase数据库中的大型数据集。 Hive最早由Facebook开发，后来2008年贡献给Apache软件基金会。此外，Hive的用途非常广泛，因为它支持分析存储在Hadoop的HDFS和其他兼容文件系统中的大量数据集。像亚马逊S3。 Hive是一个在Hadoop集群之上运行的开源数据仓库和分析包。 Hive

2019-04-05

662

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Oracle

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。