Hive统一元数据管理-低调大师

Hive统一元数据管理

2020-03-24 786

从E-MapReduce-2.4.0（以下简称 EMR）版本开始，E-MapReduce支持了统一元数据管理，在E-MapReduce-2.4.0版本之前，用户所有集群均采用的是集群本地的mysql数据库作为Hive元数据库，在E-MapReduce-2.4.0版本以及之后的版本中， E-MapReduce 会支持统一的高可靠的 Hive元数据库。

介绍

统一的元数据管理，可以实现：

持久化的元数据存储。
之前元数据都是在集群内部的mysql数据库，元数据会随着集群的释放而丢失，特别是EMR提供了灵活按量模式，集群可以按需创建用完就释放。如果用户需要保留现有的元数据信息，必须登录集群手动将元数据信息导出。支持统一的元数据管理之后，不再存在该问题。
更方便地实现计算存储分离。
EMR上可以支持将数据存放在阿里云OSS中，在大数据量的情况下将数

微信关注我们

原文链接：https://yq.aliyun.com/articles/751442

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

深度学习系统镜像（预装NVIDIA GPU驱动和深度学习框架）

深度学习系统镜像一键安装简单方便，无需手动安装GPU驱动和深度学习框架，码笔记分享阿里云深度学习操作系统镜像，这款镜像是免费使用的，基于CentOS 7.3 64位系统，预装NVIDIA GPU驱动、TensorFlow、MXNet开源深度学习框架：深度学习镜像操作系统镜像来源：阿里云镜像市场预装软件：预装NVIDIA GPU驱动、TensorFlow、MXNet开源深度学习框架费用：免费使用镜像详细说明该镜像使用CentOS 7.3 64bit系统，预装NVIDIA GPU驱动(384.66)，CUDA(8.0.61.2 including cuBLAS Patch 2)，cuDNN(6.0.21) 预装TensorFlow 1.3.0，MXNet 0.11.0。镜像使用方法该镜像为阿里云GN4/GN5/GN5i系列实例专用，选购该镜像对应的ECS云服务器，免费安装镜像。如何使用该镜像？用户可以在基于该镜像创建的云主机实例上直接进行深度学习的训练和推理。使用方法很简单，创建GN4/GN5/GN5i系列云服务器：选择ECS云服务器规格ECS云服务器有多种规格，要选择这...

2020-03-25

733

OceanBase于2020年3月在阿里云上完成了商业化，在公有云上正式对外开放。同步上线的还有相关的生态产品，包括集群管控（OCP:OceanBase Cloud Platform），诊断（OTA:OceanBase Tunning Advisor），迁移服务（OMS:OceanBase Migration Service）及开发者中心（ODC:OceanBase Developer Center）。一、公共云OceanBase服务端部署蚂蚁金服自研分布式关系数据库OceanBase是一款纯原生的分布式关系数据库，在代码层面完全可控。公共云OceanBase产品（图1-1）是基于三份副本3AZ部署，通过paxos协议保证了多节点间的数据一致性，单点故障甚至单AZ故障，也可以保障业务连续性，RPO=0，RTO<30s，做到机房级高可用，未来还将推出三地五中心的产品形态，具备城市级高可用切换能力。同时，OceanBase的资源管理具有非常高的灵活性。它支持多租户部署，在OceanBase集群里面，我们可以按需分配实例，并且可以进行在线资源扩容或者缩容。从安全性和可用性来讲，Oc...

2020-03-25

647

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。