海胜专访--MaxCompute 与大数据查询引擎的技术和故事-低调大师

海胜专访--MaxCompute 与大数据查询引擎的技术和故事

2019-07-24 717

摘要：在2019大数据技术公开课第一季《技术人生专访》中，阿里巴巴云计算平台高级技术专家苑海胜为大家分享了《MaxCompute 与大数据查询引擎的技术和故事》，主要介绍了MaxCompute与MPP Database的异同点，分布式系统上Join的实现，且详细讲解了MaxCompute针对Join和聚合引入的Hash Clustering Table和Range Clustering Table的优化。

以下内容根据演讲视频以及PPT整理而成。

一、MaxCompute VS MPP Database

MaxCompute 与 MPP Database有非常大的不同，主要体现在性能（Performance）、成本（Cost）、可扩展性（Scalability）及灵活性（Flexibility）等度量纬度。

性能（Performance）

微信关注我们

原文链接：https://yq.aliyun.com/articles/710778

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

大数据平台常用组件

BigData-Alpha-0.1.0 闲暇无趣时梳理了一版接触过涉及做大数据的组件，根据自己理解简单分类备注：未增加Doris、CarbonData 部分归类模糊仅供参考

2019-07-24

798

概述本文主要列出在使用X-Pack Spark的FAQ。 Spark服务使用问题 1. X-Pack Spark如何监控核心指标答：x-pack spark如何监控核心指标、X-Pack Spark 监控指标详解 2. 通过数据工作台上传资源文件慢答：这个主要取决于用户的上行带宽，如果上行带宽无法调整，可以使用vpc内网通过hdfs上传、httpfs上传 3. X-Pack Spark yarn任务数超过9999查看方法答：https://developer.aliyun.com/ask/139396 4. X-Pack Spark 集群如何访问外网数据接口答：Spark集群默认不能访问外网，可以通过NAT网关的方式访问。具体开通方式请参考：NAT网关。 Spark Connectors 主要列举Spark 对接其它数据源遇到的问题 Spark

2019-07-24

760

资源下载

更多资源

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。