regionserver启动后又关闭
欢迎关注大数据和人工智能技术文章发布的微信公众号:清研学堂,在这里你可以学到夜白(作者笔名)精心整理的笔记,让我们每天进步一点点,让优秀成为一种习惯!
今天启动hbase shell,输入hbase命令时报错:
ERROR [regionserver/regionserver1/172.18.0.61:16020] regg
ionserver.HRegionServer: Shutdown / close of WAL failed: org.apache.hadoop.hdfs..
server.namenode.LeaseExpiredException: No lease on /hbase/WALs/regionserver1.shaa
downet,16020,1522226971485/regionserver1.shadownet%2C16020%2C1522226971485.defauu
lt.1522237781682 (inode 16832): File does not exist. Holder DFSClient_NONMAPREDUU
CE_-210251064_1 does not have any open files.
解决办法,调整xcievers参数
默认是4096,改为8192
进入hdfs-site.xml文件
<property>
<name>dfs.datanode.max.xcievers</name>
<value>8192</value>
</property>
dfs.datanode.max.xcievers 参数说明
一个 Hadoop HDFS Datanode 有一个同时处理文件的上限. 这个参数叫 xcievers (Hadoop的作者把这个单词拼错了). 在你加载之前,先确认下你有没有配置这个文件conf/hdfs-site.xml里面的xceivers参数,至少要有4096。
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
stop-hbase.sh一直处于等待状态
欢迎关注大数据和人工智能技术文章发布的微信公众号:清研学堂,在这里你可以学到夜白(作者笔名)精心整理的笔记,让我们每天进步一点点,让优秀成为一种习惯! 今天关闭HBase时,输入stop-hbase.sh一直处于等待状态 解决方法: 先输入:hbase-daemon.sh stop master 再输入:stop-hbase.sh就可以关闭HBase集群了。
- 下一篇
阿里云EMR产品介绍及常见问题解答
一、大数据概述 二、视频大客户对于数据中心的需求 三、传统大数据技术演进 四、EMR介绍 五、为什么选择EMR 弹性动态伸缩 基于ECS之上,快捷的扩容、缩容EMR Hadoop集群。 灵活软件栈选择 灵活、快速部署开源大数据服务(HBase、Kafka、Impala、Flink等)。 数据存储成本低 D1机型使用本地盘,价格远低于云盘;OSS低成本存储冷数据。 运维机制 钉钉群支持,快速解决集群使用问题。减少运维工作,更专注于业务。 六、典型问题及解决方案 数据迁移问题 Hive,HBase数据库结构同步,HDFS数据PB级历史数据同步。如何保证线上实时任务不受影响? 元数据库同步:Hadoop distcp filter (Hadoop 2.8之后支持)。Flume配置双写,多个sink。 数据倾斜问题 现象:MapReduce任务卡在最后一个或几个Re
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- 设置Eclipse缩进为4个空格,增强代码规范
- CentOS8安装Docker,最新的服务器搭配容器使用
- MySQL8.0.19开启GTID主从同步CentOS8
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- Hadoop3单机部署,实现最简伪集群
- Docker安装Oracle12C,快速搭建Oracle学习环境
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- CentOS8安装MyCat,轻松搞定数据库的读写分离、垂直分库、水平分库
- SpringBoot2更换Tomcat为Jetty,小型站点的福音
- CentOS7设置SWAP分区,小内存服务器的救世主