记录配置HDFS HA后，hive抛错Wrong FS-低调大师

记录配置HDFS HA后，hive抛错Wrong FS

2016-12-19 752

1.问题:

在CDH5.x或者Apache环境下，配置了NameNode的HA后，Hive无正常查询数据了。

Hive查询会出现如下异常：

点击(此处)折叠或打开

FAILED: SemanticException Unable to determine if hdfs://hadoop-01:8020/user/hive/warehouse/t1
is encrypted: java.lang.IllegalArgumentException: Wrong FS: hdfs://hadoop-01:8020/user/hive/warehouse/t1, expected: hdfs://nameservice1

2.解决:
Hive元数据的问题，在Hive数据库中有两张表：

DBS ： Hive数据仓库的总路径

SDS ： Hive每张表对应的路径

a.进入mysql
b.use hive;
c.修改dbs 和 sds表

点击(此处)折叠或打开

update DBS set DB_LOCATION_URI=REPLACE (DB_LOCATION_URI,'hadoop-01:8020','nameservice1');
update SDS set LOCATION=REPLACE (LOCATION,'hadoop-01:8020','nameservice1')

微信关注我们

原文链接：https://yq.aliyun.com/articles/578791

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

参加“谛听金融大数据产品”的开发，赢得了IBM Spark全球大赛的中国大奖

项目团队：项目可视化web: http://diting.tech/diting/ 视频与代码: http://diting.tech/diting/download_contact.html 微信博文原处: http://mp.weixin.qq.com/s/ExfdB2ApLTfv6oYyxvH81g

2016-12-19

710

2016-12-15 来源：云科技时代作者：宁川自从2015年11月阿里巴巴集团宣布正式加入Apache基金会以来，阿里技术已经向Apache捐赠了三个开源项目，分别是JStorm、RocketMQ和Weex。其中Weex于2016年12月15日正式捐赠给Apache基金会，RocektMQ有望成为首个来自中国的Apache互联网中间件顶级子项目，Weex则有望成为中国的移动开发顶级子项目。截止到2016年9月，阿里已经开源115个项目，加入了FSF基金会、Apache基金会、Linux 基金会和Xen顾问团队。阿里云还是MySQL开源分支 WebScaleSQL的第五位发起成员，该分支是由 Facebook、 Google、LinkedIn 和Twitter 四家互联网公司的数据库团队发起，是以适应互联网场景为目标的MySQL分支。那么，阿里技术为什么要开源？为什么要向Apache捐赠开源项目？凭什么在实时计算、互联网中间件和移动开发等核心技术领域，参与到Apache这一全球开源技术社区的核心讨论中？基于中国互联网场景从最新捐赠的Weex说起。Weex是阿里自研的高性能跨平...

2016-12-19

628

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。