执行Hive时出现org.apache.hadoop.util.RunJar.main(RunJar.java:136) Caused by...-低调大师

执行Hive时出现org.apache.hadoop.util.RunJar.main(RunJar.java:136) Caused by...

2016-10-29 831 89

　　　　　　不多说，直接上干货

问题详情

[kfk@bigdata-pro01 apache-hive-0.13.1-bin]$ bin/hive

Logging initialized using configuration in file:/opt/modules/apache-hive-1.0.0-bin/conf/hive-log4j.properties
Exception in thread "main" java.lang.RuntimeException: java.lang.NumberFormatException: For input string: "1s"
    at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:346)
    at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:681)
    at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:625)
    at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
    at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
    at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
    at java.lang.reflect.Method.invoke(Method.java:606)
    at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
    at org.apache.hadoop.util.RunJar.main(RunJar.java:136)
Caused by: java.lang.NumberFormatException: For input string: "1s"

　解决办法

　　　　网上查了说改，

　　　　也许，你改完之后，依然还是如此。

　　Caused by: java.lang.NumberFormatException: For input string: "1s"还是这样

　　　　我换其他版本，1.0.0没毛病。

　　　　归结为，比如你是apache-hadoop-2.5.0可以和apache-hive-0.13.1搭配

　　　　　　　　比如你是apache-hadoop-2.6.0可以和apache-hive-1.0.0 和 apache-hive-1.2.1搭配。

　　　　如果你遇到更多的Hive问题，见如下，也许能帮助到你

本文转自大数据躺过的坑博客园博客，原文链接：http://www.cnblogs.com/zlslch/p/8228448.html，如需转载请自行联系原作者

微信关注我们

原文链接：https://yq.aliyun.com/articles/362259

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2016-10-30 00:00:00

Upgrade json-serde-xxx jar in Apache Hive-1.2.1

1.背景: 在迁移ETL至ALiYun EMR环境，使用我们定制的Hive-1.2.1-emr版本过程中，业务脚本需要使用json-serde-1.1.9.9-SNAPSHOT-jar-with-dependencies.jar 2.抛错如下: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. Cannot validate serde: org.openx.data.jsonserde.JsonSerDe. http://stackoverflow.com/questions/26644351/cannot-validate-serde-org-openx-data-jsonserde-jsonserde 3.解决版本: 升级json-serde jar为最新版 1.Configure mvn [root@hadoopnn-01 hadoop]# export MAVEN_HOME=/hadoop/maven [root@hadoopnn-01 hadoo...

714

2016-10-30 00:00:00

记录ALiYun EMR常用服务的手动启动和停止命令(hdfs/yarn/mr-jobhistory/zk/spark-history)

说明：在ssh,用root用户登录到header(master)机器上,手工执行以下命令进行业务调试。常用命令： 1. env (忘记是大写ENV,还是小写env,来查看环境变量) 2. cat /etc/hosts (查看EMR集群机器的hostname ip配置) 3. 在header机器上，切换到hadoop用户后，可以 ssh@emr-worker-1 直接登录到worker-1机器上，因为集群的机器，hadoop用户已经配置互相信任关系。启动： ###start zk su hadoop -c "/usr/lib/zookeeper-current/bin/zkServer.sh start" for i in `seq 1 2`; do su hadoop -c "ssh emr-worker-${i} /usr/lib/zookeeper-current/bin/zkServer.sh start"; done ###start hdfs su hdfs -c "/usr/lib/hadoop-current/sbin/hadoop-daemon.sh start n...

592

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Oracle Database，又名Oracle RDBMS

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。