Check the value configured in 'zookeeper.znode.parent'-低调大师

Check the value configured in 'zookeeper.znode.parent'

2017-11-07 660

进入hbase shell之后，执行list命令，报错如下

 
        15
        /04/23 
        15:24:31 ERROR client.HConnectionManager$HConnectionImplementation: Check the value configured 
        in 
        'zookeeper.znode.parent'
        . There could be a mismatch with the one configured 
        in 
        the master.

查看Hbase下的logs目录，查看了其输出的日志信息
Could not start ZK at requested port of 2181. ZK was started at port:2182. Aborting as clients(e.g. shell) will not be able to find this ZK quorum.

怀疑Zookeeper默认端口2181被占用，

1、使用命令lsof -i:2181查看端口被占用情况

2、杀死占用端口的进程

3、重新启动hbase,进入shell，执行list命令

本文转自巧克力黒 51CTO博客，原文链接：http://blog.51cto.com/10120275/1637616，如需转载请自行联系原作者

微信关注我们

原文链接：https://yq.aliyun.com/articles/515376

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

hbase shell状态下回退键不好用（scureCRT）

SecureCRT选项-->会话选项终端-->仿真，右侧选择Linux 如果还是不能使用回退功能，则需要如下配置选择终端--仿真--映射键，两个都打勾。Well Done!!! 本文转自巧克力黒 51CTO博客，原文链接：http://blog.51cto.com/10120275/1637637，如需转载请自行联系原作者

2017-11-08

620

3.3 Spark在预测核心层的应用我们使用Spark SQL和Spark RDD相结合的方式来编写程序，对于一般的数据处理，我们使用Spark的方式与其他无异，但是对于模型训练、预测这些需要调用算法接口的逻辑就需要考虑一下并行化的问题了。我们平均一个训练任务在一天处理的数据量大约在500G左右，虽然数据规模不是特别的庞大，但是Python算法包提供的算法都是单进程执行。我们计算过，如果使用一台机器训练全部品类数据需要一个星期的时间，这是无法接收的，所以我们需要借助Spark这种分布式并行计算框架来将计算分摊到多个节点上实现并行化处理。我们实现的方法很简单，首先需要在集群的每个节点上安装所需的全部Python包，然后在编写Spark程序时考虑通过某种规则将数据分区，比如按品类维度，通过groupByKey操作将数据重新分区，每一个分区是一个样本集合并进行独立的训练，以此达到并行化。流程如下图所示：伪码如下： repartitionBy方法即设置一个重分区的逻辑返回(K,V)结构RDD，train方法是训练数据，在train方法里面会调用Python算法包接口。saveAsPick...

2017-11-08

581

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。