kylin集群解决无法加载到RowKeyWritable类-低调大师

kylin集群解决无法加载到RowKeyWritable类

2019-10-28 696

问题：cdh集成kylin之后，对kylin的cube进行build操作的时候，在Convert Cuboid Data to HFile步骤报错：Class org.apache.kylin.storage.hbase.steps.RowKeyWritable not found

问题分析：加载不到RowKeyWritable类，发现此类是咋在kylin的协处理器jar包之中可以找到，kylin-coprocessor-2.3.0.jar中可以找到，且在kylin.properties中指定过用来指向 HBase 协处理器有关 jar 包的配置 kylin.storage.hbase.coprocessor-local-jar ，但是build kylin cube的时候仍然找不到RowKeyWritable类。思考有两种可能，第一，kylin版本不支持，第二，配置文件设置错误；

解决问题：对于第一种情况，下载不同版本同样的问题依旧存在，那么，配置文件设置错误的可能性很大，但是对比kylin的官网配置文件详细介绍，发现也没有问题，于是只能坚持安装过程修改过的配置，在启动脚本kylin.sh中，为了解决kylin运行时报错：org/apache/Hadoop/hive/conf/hiveConf修改过

export HBASE_CLASSPATH_PREFIX=${KYLIN_HOME}/conf:${KYLIN_HOME}/lib/*:${KYLIN_HOME}/ext/*:${HBASE_CLASSPATH_PREFIX}，将其修改成了export HBASE_CLASSPATH_PREFIX=${tomcat_root}/bin/bootstrap.jar:${tomcat_root}/bin/tomcat-juli.jar:${tomcat_root}/lib/*:$hive_dependency:${HBASE_CLASSPATH_PREFIX}；在kylin.sh启动脚本中export HBASE_CLASSPATH_PREFIX环境变量有三处，改错了位置，应该改第二处，我改成了第一处，使得启动kylin的时候找不到${KYLIN_HOME}/lib下面的kylin的hbase协处理器jar包

微信关注我们

原文链接：https://my.oschina.net/zhouwang93/blog/3123004

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

[每日短篇] 23 - 动态给容器指定 Java 启动参数

在做 Java 程序容器化时都会遇到一个问题，ENTRYPOINT ["java", "$JAVA_OPTS", "-jar", ...] 这样的写法 $JAVA_OPTS 就是个字符串无法在运行时展开。为了不把参数硬编码到容器里，每次调整参数重新构建镜像，可以有多种方案，先介绍几种不够好的方案。 ENTRYPOINT java $JAVA_OPTS -jar ...，这种方式的问题是 java 不是容器主进程（至于为什么要保证 java 是主进程，又是一个话题，是容器化基本最佳实践之一）； ENTRYPOINT ["sh", "-c", "java $JAVA_OPTS -jar ..."]，这种写法其实等价于上面一种方式，上面一种方式在运行时就是以 /bin/sh -c "java $JAVA_OPTS -jar ..." 方式运行的，所以缺陷也是相同的； ENTRYPOINT ["entrypoint.sh"] 然后在脚本中启动 java，使用脚本对于需要在启动时做复杂操作的容器比较有用，但是对启动 java 来说未免小题大作，并且同样有 java 不是容器主进程的问题。从 s...

2019-10-28

842

JEDI 合同为期 10 年，价值高达 100 亿美元。其他公司也在争取这份合同，但最后都被排除在外，其中包括 IBM 和 Oracle。美国五角大楼周五声称，在竞相为美国国防部提供公共云资源的激烈竞争中，微软击败了市场领头羊 AWS，成为了大赢家。这份声明称，这份合同为期 10 年，价值高达 100 亿美元。消息一出，微软股在延长交易时段应声上涨 2.3%，而亚马逊股下跌近1%。这一成果恰恰表明了微软 Azure 云已强势崛起，成为 AWS 的有力挑战者；这也是 Satya Nadella 取得的最新胜果，2014 年他接替 Steve Ballmer 成为微软总裁。就在 AWS 一路高歌猛进之际，微软还与沃尔玛等公司签下了金额庞大的云基础设施订单。如果这笔交易最终价值 100 亿美元，相对亚马逊而言，这对于微软来说是一笔更大的单子。微软并没有披露 Azure 收入方面的确切数字，但外界普遍认为 Azure 的市场份额要低于亚马逊，后者在第三季度从 AWS 获得 90 亿美元的收入。其他比较小的云竞争对手（比如 IBM 和 Oracle）在招标过程中早早被淘汰出局，招标过...

2019-10-28

588

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。