用 MaxCompute Studio 查看作业排队详情-低调大师

用 MaxCompute Studio 查看作业排队详情

2017-07-23 607

各位MaxCompute的用户及运维朋友，在日常使用中，您有没有遇到这种场景：我作业提交了这么久，为啥还没看到计算任务执行？作业提交后状态一直是 RUNNING ，到底执行到了什么阶段？作业提交后只能等，也不知道完成的进度如何？为何当前作业一直在等待，到底什么作业正在占用着我的计算资源？
现在，为了解决用户的这些痛点，MaxCompute 正式上线了作业队列展示功能。用户可以通过 MaxCompute Studio 和 Logview 查看作业执行的详细阶段，查看计算集群的等待队列，从此不再对提交作业的执行状态一无所知。

用户可以根据队列详情优化自己的作业优先级和调度机制，从而进一步提高计算资源的利用率。

本文首先对MaxCompute作业执行的各个阶段进行说明，然后以MaxCompute Studio为例，说明如何查看作业排队位置，

微信关注我们

原文链接：https://yq.aliyun.com/articles/141093

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

MaxCompute实践

一、写在前面本人之前一直从事程序开发的（PHP、JAVA、Python）工作，在之前的工作经历中有过一段时间配合Hadoop工程师的事务，但接触的并不深，只能说略知点皮毛，有点管中窥豹的感觉。今年进了新公司，因为公司正在组建新的数据部门，非常有幸本人得以调入该部门，恰逢MaxCompute横空出世，刚好因为我那时工作比较空闲，得以安排调研它的功能及测试是否符合我们的要求。由于个人对大数据这块的经验不足，涉及的内容也不是太高端的，所得知识基本是通过阅读文档获得，所以本文仅以初学者的角度去阐述，主要围绕数据迁移这块，其他部分还未来得急涉及，如有不正确的地方，还请指出，谢谢。二、平台体系的选型因初期数据量相对较小，使用Kettle进行抽取数据等工作，ETL的工作大部分在MySQL数据仓库中完成。多种数据源使用Presto（集群）作为查询中间键进行相应的数据分析。但随着业务的疯狂增长，数据表单表达到数亿后，磁盘容量达数几百GB时，数据要求的复杂度逐步提升，使用MySQL作为基础数据仓库的基石已经不足以应付，常出现查询响应时间等待过长，甚至内存崩溃导致执行失败的情况，极大的影响了工作效率。...

2017-07-24

839

MaxCompute模板与样例

1. 简介 MaxCompute : 是一种快速、完全托管的数据仓库解决方案，用户可以通过SQL, MR, UDF等接口与其交互。 MaxCompute Studio : 是MaxCompute平台提供的安装在开发者客户端的大数据集成开发环境（IDE），是用户与MaxCompute交互的高效工具。代码模板：让用户更加高效的写一些固定模式的代码，简化很多重复的代码，以提高编码效率。代码示例：一例胜千言，帮助用户快速熟悉语法，可参考示例编写自己的程序，快速上手。代码模板和示例是用户熟悉新产品和提高开发效率的有效方式，studio提供了一系列的开发模板和代码实例。用户可以通过这些功能，快速熟悉MaxCompute，玩转大数据下的程序开发。 2. SQL模板用户常用sql来查询和分析MaxCompute中的大规模数据，是与MaxCompute交

2017-07-24

570

资源下载

更多资源

Mario，低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Oracle Database，又名Oracle RDBMS

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。