调度参数在MaxCompute的使用

2020-04-01 809

一、调度参数和MaxCompute的关系

首先明确调度参数是属于DataWorks上的和MaxCompute之间是没有关系的。

二、调度参数执行的原理

调度参数是经过DataWorks的调度系统进行解析，然后将解析的值传到MaxCompute上MaxCompute根据对应的key获取对应的value，所以想要取到值必须经过DataWorks的调度系统解析。

三、如何测试调度参数

1.系统参数（2个）

• 主要包括业务时间bdp.system.bizdate
• 定时时间bdp.system.cyctime
说明：
这两个值由于是DataWorks的系统参数，可以直接在代码中使用，在页面点击高级运行可以解析。
**使用方法：
**
在DataWorks直接点击高级运行可以看到结果

select ${bdp.system.bizdate}

结果：

2.时间参数

内置

微信关注我们

原文链接：https://yq.aliyun.com/articles/752822

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

HBase 加载Hfile时的读取过程

Hfile分为4部分，其中loadOnOpen section 和trailer这2部分是open file时就会加载到内存的。 Step1：读取文件末尾的4Bytes，得到Hfile format版本号，进而知道Trailer部分的大小， v2和v3都固定为4096Bytes； Step2：读取文件末尾的4096Bytes，这部分整体作为一个block，包含一些重要的元数据信息，目前有15个，分为以下几类；偏移量：loadOnOpenDataOffset、fileinfoOffset、firstDataBlockOffset、lastDataBlockOffset；数量和大小：totalUncomressedBytes、entryCount、dataIndexCount、metaIndexCount、uncompressedDataIndexSize、numDataIndexLevels 算法：compressionCodec、comparatorClassName、encryptionKey 版本号：majorVersion、minorVersion 其中，fileinfo...

2020-04-02

809

文娱大脑究竟能有多“智能”？答案是全生命周期的人工智能技术！从内容智能到增长营销，全景揭秘阿里文娱智能算法，就在这一本！点击这里免费获取电子书阿里是一家坚信数据力量的公司，而文娱涉及的相关产业非常广泛，从线上到线下、从影剧综漫到现场娱乐以及文学小说等，其组成、形式、展现、分发的复杂性交织在一起为业务数据化带来了巨大的挑战。近三年来，阿里文娱摩酷实验室始终以助力业务发展和增长为核心驱动，形成如下四个的技术方向：内容理解是文娱相关算法技术的基石，IP、小说、剧本、视频、音乐等不同形态的内容对构建起领域知识图谱带来了很多困难，在这其中计算机视觉、自然语言处理、图谱&推理、图神经网络、多模态内容分析等技术被广泛应用于内容解构。以视频为例，影剧综视频的时长很难用一些低层级的标签来抽象表达其内容，基于多模态的分析技术在这类内容上也

2020-04-02

813

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。