用 MaxCompute Studio 查看作业排队详情-低调大师

用 MaxCompute Studio 查看作业排队详情

2017-07-23 623

各位MaxCompute的用户及运维朋友，在日常使用中，您有没有遇到这种场景：我作业提交了这么久，为啥还没看到计算任务执行？作业提交后状态一直是 RUNNING ，到底执行到了什么阶段？作业提交后只能等，也不知道完成的进度如何？为何当前作业一直在等待，到底什么作业正在占用着我的计算资源？
现在，为了解决用户的这些痛点，MaxCompute 正式上线了作业队列展示功能。用户可以通过 MaxCompute Studio 和 Logview 查看作业执行的详细阶段，查看计算集群的等待队列，从此不再对提交作业的执行状态一无所知。

用户可以根据队列详情优化自己的作业优先级和调度机制，从而进一步提高计算资源的利用率。

本文首先对MaxCompute作业执行的各个阶段进行说明，然后以MaxCompute Studio为例，说明如何查看作业排队位置，

微信关注我们

原文链接：https://yq.aliyun.com/articles/141093

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

MaxCompute实践

一、写在前面本人之前一直从事程序开发的（PHP、JAVA、Python）工作，在之前的工作经历中有过一段时间配合Hadoop工程师的事务，但接触的并不深，只能说略知点皮毛，有点管中窥豹的感觉。今年进了新公司，因为公司正在组建新的数据部门，非常有幸本人得以调入该部门，恰逢MaxCompute横空出世，刚好因为我那时工作比较空闲，得以安排调研它的功能及测试是否符合我们的要求。由于个人对大数据这块的经验不足，涉及的内容也不是太高端的，所得知识基本是通过阅读文档获得，所以本文仅以初学者的角度去阐述，主要围绕数据迁移这块，其他部分还未来得急涉及，如有不正确的地方，还请指出，谢谢。二、平台体系的选型因初期数据量相对较小，使用Kettle进行抽取数据等工作，ETL的工作大部分在MySQL数据仓库中完成。多种数据源使用Presto（集群）作为查询中间键进行相应的数据分析。但随着业务的疯狂增长，数据表单表达到数亿后，磁盘容量达数几百GB时，数据要求的复杂度逐步提升，使用MySQL作为基础数据仓库的基石已经不足以应付，常出现查询响应时间等待过长，甚至内存崩溃导致执行失败的情况，极大的影响了工作效率。...

2017-07-24

864

1. 简介 MaxCompute : 是一种快速、完全托管的数据仓库解决方案，用户可以通过SQL, MR, UDF等接口与其交互。 MaxCompute Studio : 是MaxCompute平台提供的安装在开发者客户端的大数据集成开发环境（IDE），是用户与MaxCompute交互的高效工具。代码模板：让用户更加高效的写一些固定模式的代码，简化很多重复的代码，以提高编码效率。代码示例：一例胜千言，帮助用户快速熟悉语法，可参考示例编写自己的程序，快速上手。代码模板和示例是用户熟悉新产品和提高开发效率的有效方式，studio提供了一系列的开发模板和代码实例。用户可以通过这些功能，快速熟悉MaxCompute，玩转大数据下的程序开发。 2. SQL模板用户常用sql来查询和分析MaxCompute中的大规模数据，是与MaxCompute交

2017-07-24

584

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。