MaxCompute模板与样例

2017-07-23 570

1. 简介

MaxCompute : 是一种快速、完全托管的数据仓库解决方案，用户可以通过SQL, MR, UDF等接口与其交互。
MaxCompute Studio : 是MaxCompute平台提供的安装在开发者客户端的大数据集成开发环境（IDE），是用户与MaxCompute交互的高效工具。
代码模板：让用户更加高效的写一些固定模式的代码，简化很多重复的代码，以提高编码效率。
代码示例：一例胜千言，帮助用户快速熟悉语法，可参考示例编写自己的程序，快速上手。

代码模板和示例是用户熟悉新产品和提高开发效率的有效方式，studio提供了一系列的开发模板和代码实例。用户可以通过这些功能，快速熟悉MaxCompute，玩转大数据下的程序开发。

2. SQL模板

用户常用sql来查询和分析MaxCompute中的大规模数据，是与MaxCompute交

微信关注我们

原文链接：https://yq.aliyun.com/articles/141111

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

用 MaxCompute Studio 查看作业排队详情

各位MaxCompute的用户及运维朋友，在日常使用中，您有没有遇到这种场景：我作业提交了这么久，为啥还没看到计算任务执行？作业提交后状态一直是 RUNNING ，到底执行到了什么阶段？作业提交后只能等，也不知道完成的进度如何？为何当前作业一直在等待，到底什么作业正在占用着我的计算资源？现在，为了解决用户的这些痛点，MaxCompute 正式上线了作业队列展示功能。用户可以通过 MaxCompute Studio 和 Logview 查看作业执行的详细阶段，查看计算集群的等待队列，从此不再对提交作业的执行状态一无所知。用户可以根据队列详情优化自己的作业优先级和调度机制，从而进一步提高计算资源的利用率。本文首先对MaxCompute作业执行的各个阶段进行说明，然后以MaxCompute Studio为例，说明如何查看作业排队位置，

2017-07-24

606

ComputeColStats UDF中近似算法的介绍(续)

在前一篇文章的最后提到，对于准确率的提升是后续需要做的事情之一。接下来看看对于提升准确率，还有哪些事情可以做。一，回顾首先回顾下前一篇文章最后得到的结果，如下：执行时间先忽略，只看准确率。对于上面８个字段，有些在sample为２５（采样比例１／２５）的情况下还是相当准确的，比如odps_task_type，start_time；而有些则存在一定差距，比如project_name，fuxi_ceil_mem等；还有些存在比较大的差距，比如odps_inst_id，fuxi_avg_cpu。同样的采样算法，同样的估计算法，对于不同的数据会得到截然不同的结果。这种差异相信决大部分来自于数据本身。下面就从数据本身来看下到底差异是如何出现的。二，数据差异不同的字段存储的数据不同，不同数据可能会存在唯一值上的差异。比如说对于主键，比如说对于纬度直，两者肯定在DistinctValue的分布上肯定是完全不同的。 1，如果该字段为主键，那么RowCount（X轴）和DistinctValue（Y轴）关系类似下图：这是一条斜率为1的直线。对于这种情况，目前的算法肯定可以非常准确的估算出Dist...

2017-07-25

472

资源下载

更多资源

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

MaxCompute模板与样例

1. 简介