大数据开发—常见问题（3）-低调大师

大数据开发—常见问题（3）

2017-05-13 632 89

我们在进行大数据开发过程中，会遇到各种问题，本文将定期收集整理一些在使用阿里云数加 MaxCompute 和大数据开发套件过程中遇到的常见问题，供大家参考~

Q：在大数据开发套件—运维中心中查看任务，显示全部失败？

A：因为任务中配置了上游依赖，上游任务跑失败了，导致下游任务无法继续。

Q： ADS 支持 IF、IFNULL 关键字吗？
A：不支持，您可以用 case when 、coalesce 代替，另外，若是含 group by的 SQL 语句中必须有聚合函数来匹配 group by 。

Q：华北 1 的 RDS 同步到华东 2 的 MaxCompute 会产生公网费用吗？
A：会产生费用，您可以参见：服务连接对收费详情进行了解。

Q： ADS 中什么函数可以替换 Mysql 中的 TIMESTAMPD

微信关注我们

原文链接：https://yq.aliyun.com/articles/81129

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2017-05-12 00:00:00

EMR集群上capacity scheduler的ACL实现

背景前面一篇介绍了yarn的capacity scheduler原理，实验了在EMR集群上使用capacity scheduler对集群资源的隔离和quota的限制。本文会介绍EMR集群上capacity scheduler的ACL实现。为什么要做这个？前面给集群分配的资源分配了多个队列，以及每个队列的资源配比和作业调度的优先级。如果多租户里面的每个都按照约定，各自往自己对应的队列里面提交作业，自然没有问题。但是如果用户熟悉capacity scheduler的操作和原理，也是可以占用别组的资源队列。所有有了capacity scheduler的ACL设置。关键参数 yarn.scheduler.capacity.queue-mappings 指定用户和queue的映射关系。默认用户上来，不用指定queue参数就能直接到对应的queu

709

2017-05-15 00:00:00

技术与时代并行丨DBAplus Newsletter（2017年2月）

本期要闻：从DB-Engines近几年的趋势看数据库的变革；Oracle 12cR2发布部分版本；MySQL 5.7.17 GR发布；PostgreSQL将发布10.0；MongoDB 3.4通过行业最严格的分布式数据库测试；Redis最新漏洞和修复……更多资讯请阅读全文。本期目录一、推出DBAplus Newsletter的想法二、DB-Engines数据库排行榜三、从DB-Engines近几年的趋势看数据库的变革四、RDBMS家族 Oracle 12c Release 2率先发布Exadata，SuperCluster版本 Oracle 12c Release 2特性解读（点击下载查看） MySQL 5.7.17 Group Replication发布 MySQL 5.7新特性解读（点击下载查看） SQL Server Linux版涨势迅猛 PostgreSQL将发布10.0 DB2 For LUW发布11.1 Mod1 Fix pack1 版本 Greenplum补丁版本发布，Gemfire-Greenplum connector发布 MariaDB ColumnSt...

583

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。