Check the value configured in 'zookeeper.znode.parent'-低调大师

Check the value configured in 'zookeeper.znode.parent'

2017-11-07 680

进入hbase shell之后，执行list命令，报错如下

 
        15
        /04/23 
        15:24:31 ERROR client.HConnectionManager$HConnectionImplementation: Check the value configured 
        in 
        'zookeeper.znode.parent'
        . There could be a mismatch with the one configured 
        in 
        the master.

查看Hbase下的logs目录，查看了其输出的日志信息
Could not start ZK at requested port of 2181. ZK was started at port:2182. Aborting as clients(e.g. shell) will not be able to find this ZK quorum.

怀疑Zookeeper默认端口2181被占用，

1、使用命令lsof -i:2181查看端口被占用情况

2、杀死占用端口的进程

3、重新启动hbase,进入shell，执行list命令

本文转自巧克力黒 51CTO博客，原文链接：http://blog.51cto.com/10120275/1637616，如需转载请自行联系原作者

微信关注我们

原文链接：https://yq.aliyun.com/articles/515376

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

hbase shell状态下回退键不好用（scureCRT）

SecureCRT选项-->会话选项终端-->仿真，右侧选择Linux 如果还是不能使用回退功能，则需要如下配置选择终端--仿真--映射键，两个都打勾。Well Done!!! 本文转自巧克力黒 51CTO博客，原文链接：http://blog.51cto.com/10120275/1637637，如需转载请自行联系原作者

2017-11-08

645

3.3 Spark在预测核心层的应用我们使用Spark SQL和Spark RDD相结合的方式来编写程序，对于一般的数据处理，我们使用Spark的方式与其他无异，但是对于模型训练、预测这些需要调用算法接口的逻辑就需要考虑一下并行化的问题了。我们平均一个训练任务在一天处理的数据量大约在500G左右，虽然数据规模不是特别的庞大，但是Python算法包提供的算法都是单进程执行。我们计算过，如果使用一台机器训练全部品类数据需要一个星期的时间，这是无法接收的，所以我们需要借助Spark这种分布式并行计算框架来将计算分摊到多个节点上实现并行化处理。我们实现的方法很简单，首先需要在集群的每个节点上安装所需的全部Python包，然后在编写Spark程序时考虑通过某种规则将数据分区，比如按品类维度，通过groupByKey操作将数据重新分区，每一个分区是一个样本集合并进行独立的训练，以此达到并行化。流程如下图所示：伪码如下： repartitionBy方法即设置一个重分区的逻辑返回(K,V)结构RDD，train方法是训练数据，在train方法里面会调用Python算法包接口。saveAsPick...

2017-11-08

600

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。