MaxCompute中使用OSS外部表读取JSON数据-低调大师

MaxCompute中使用OSS外部表读取JSON数据

2019-12-03 1242

一、打开OSS，上传json文件

json文件内容展示：

{"id":5644228109524316032,"sourceType":1}
{"id":-736866360508848202,"sourceType":3}

二、登录DataWorks，建立外部表

建表语句：

CREATE EXTERNAL TABLE `json_table` (
    `id` bigint,
    `sourcetype` int
) 
ROW FORMAT SERDE 'org.apache.hive.hcatalog.data.JsonSerDe'
STORED AS TEXTFILE
LOCATION 'oss://oss-cn-beijing-internal.aliyuncs.com/gjt-demo/home/jsondata/';

三、建立临时查询，查看数据

需要设置的flag语句以及查询语句

set odps.sql.type.system.odps2=true;
set odps.sql.hive.compatible=true;
select * from json_table;

查询结果展示：

欢迎加入“MaxCompute开发者社区2群”,点击链接申请加入或扫描二维码
https://h5.dingtalk.com/invite-page/index.html?bizSource=____source____&corpId=dingb682fb31ec15e09f35c2f4657eb6378f&inviterUid=E3F28CD2308408A8&encodeDeptId=0054DC2B53AFE745

微信关注我们

原文链接：https://yq.aliyun.com/articles/737902

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

FreeBSD 12.1 跑分测试：在 AMD Ryzen 线程撕裂者 3970X 上快得让人刷新认知

要是你对FreeBSD运行在AMD Ryzen线程撕裂者3960X/3970X + TRX40主板上感兴趣的话，我们这篇测试体验绝对会让你感到无比舒爽。事实上，对于开箱即用体验而言，或许就已经比目前Linux的启动时MCE（机器检查异常）解决方案好得多。这篇文章就是FreeBSD 12.1在线程撕裂者3970X上的跑分结果，与之对比的是Linux和Windows，都在相同的高性能平台上测试。这次FreeBSD 12.1运行在32核、64线程的Ryzen线程撕裂者3970X上，使用华硕ROG ZENITH II EXTREME主板，启动、运行都相当流畅，所有核心都正常运作，PCIe 4.0 NVMe SSD硬盘、主板网卡等主板功能一切正常。这套系统插满4条16GB DDR4-3600内存，还有1TB Corsair Force MP600 NVMe SSD和Radeon RX 580显卡。考虑到在这套系统上，Linux甚至出现了无法启动问题，而FreeBSD却能正常运作，真是令人欣喜。虽然FreeBSD 12.1在TRX40主板(ROG Zenith II Extreme)搭配AMD...

2019-12-04

969

计算机视觉领域顶级会议 ICCV 2019 于11月2日在韩国首尔完美落下帷幕。在大会 Comprehensive Video Understanding in the Wild (简称：CoVieW) Workshop 举办的挑战赛中，新华智云团队研发的视频综合理解系统取得了第一名的成绩。戳这里了解详情那么，智云团队究竟在这次 CoVieW 挑战赛做了哪些工作从而取得本次大赛第一呢？我们特别邀请了智云团队的领队——北京 AI LAB 负责人蒋宇东详细介绍了本次挑战赛中，智云针对视频综合理解问题所提出的解决方案。除此以外，小编还准备了一个“缩略易懂版”方便大家快速了解~ 缩略易懂版让计算机“看懂”视频！ CoVieW 视频综合理解挑战赛是本届 ICCV 上针对视频理解的挑战赛，而所谓视频理解其实就是要让计算机“看懂”视频。目前针对视频理解的研究的工作多数聚焦在行为分类或者场景分类等某一个独立的问题上，没有很好地考虑场景和行为间内在的联系。这次 CoVieW 挑战赛要求对视频进行多角度的综合理解，同时完成行为分类、场景分类、视频综述三个任务，可以说是非常有挑战性了。我们的解...

2019-12-04

755

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。