Hive统一元数据管理-低调大师

Hive统一元数据管理

2020-03-24 772

从E-MapReduce-2.4.0（以下简称 EMR）版本开始，E-MapReduce支持了统一元数据管理，在E-MapReduce-2.4.0版本之前，用户所有集群均采用的是集群本地的mysql数据库作为Hive元数据库，在E-MapReduce-2.4.0版本以及之后的版本中， E-MapReduce 会支持统一的高可靠的 Hive元数据库。

介绍

统一的元数据管理，可以实现：

持久化的元数据存储。
之前元数据都是在集群内部的mysql数据库，元数据会随着集群的释放而丢失，特别是EMR提供了灵活按量模式，集群可以按需创建用完就释放。如果用户需要保留现有的元数据信息，必须登录集群手动将元数据信息导出。支持统一的元数据管理之后，不再存在该问题。
更方便地实现计算存储分离。
EMR上可以支持将数据存放在阿里云OSS中，在大数据量的情况下将数

微信关注我们

原文链接：https://yq.aliyun.com/articles/751442

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

深度学习系统镜像（预装NVIDIA GPU驱动和深度学习框架）

深度学习系统镜像一键安装简单方便，无需手动安装GPU驱动和深度学习框架，码笔记分享阿里云深度学习操作系统镜像，这款镜像是免费使用的，基于CentOS 7.3 64位系统，预装NVIDIA GPU驱动、TensorFlow、MXNet开源深度学习框架：深度学习镜像操作系统镜像来源：阿里云镜像市场预装软件：预装NVIDIA GPU驱动、TensorFlow、MXNet开源深度学习框架费用：免费使用镜像详细说明该镜像使用CentOS 7.3 64bit系统，预装NVIDIA GPU驱动(384.66)，CUDA(8.0.61.2 including cuBLAS Patch 2)，cuDNN(6.0.21) 预装TensorFlow 1.3.0，MXNet 0.11.0。镜像使用方法该镜像为阿里云GN4/GN5/GN5i系列实例专用，选购该镜像对应的ECS云服务器，免费安装镜像。如何使用该镜像？用户可以在基于该镜像创建的云主机实例上直接进行深度学习的训练和推理。使用方法很简单，创建GN4/GN5/GN5i系列云服务器：选择ECS云服务器规格ECS云服务器有多种规格，要选择这...

2020-03-25

720

OceanBase于2020年3月在阿里云上完成了商业化，在公有云上正式对外开放。同步上线的还有相关的生态产品，包括集群管控（OCP:OceanBase Cloud Platform），诊断（OTA:OceanBase Tunning Advisor），迁移服务（OMS:OceanBase Migration Service）及开发者中心（ODC:OceanBase Developer Center）。一、公共云OceanBase服务端部署蚂蚁金服自研分布式关系数据库OceanBase是一款纯原生的分布式关系数据库，在代码层面完全可控。公共云OceanBase产品（图1-1）是基于三份副本3AZ部署，通过paxos协议保证了多节点间的数据一致性，单点故障甚至单AZ故障，也可以保障业务连续性，RPO=0，RTO<30s，做到机房级高可用，未来还将推出三地五中心的产品形态，具备城市级高可用切换能力。同时，OceanBase的资源管理具有非常高的灵活性。它支持多租户部署，在OceanBase集群里面，我们可以按需分配实例，并且可以进行在线资源扩容或者缩容。从安全性和可用性来讲，Oc...

2020-03-25

626

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Apache Tomcat

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。