CDH集群机器,安装多个CDH版,会出现命令找不到,如hadoop,hdfs等等-低调大师

CDH集群机器,安装多个CDH版,会出现命令找不到,如hadoop,hdfs等等

2016-11-17 684

1.想使用hadoop命令,发现无效
[root@hadoopnn-01 ~]# which hadoop
/usr/bin/which: no hadoop in (/usr/java/jdk1.7.0_67-cloudera/bin:/usr/java/jdk1.7.0_67-cloudera/bin:/usr/lib64/qt-3.3/bin:/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin)

2.进/usr/bin/目录查看hadoop
[root@hadoopnn-01 ~]# cd /usr/bin
[root@hadoopnn-01 bin]# ll hadoop
lrwxrwxrwx 1 root root 24 Nov 17 19:25 hadoop -> /etc/alternatives/hadoop

####这个软连接一直在跳动,说明这个原路径/etc/alternatives/hadoop 不存在，如下图：

3.重新配置 hadoop的软连接，是由alternatives来动态管理的
[root@hadoopnn-01 bin]# alternatives --config hadoop

There are 3 programs which provide 'hadoop'.

Selection    Command
-----------------------------------------------
*+ 1           /opt/cloudera/parcels/CDH-5.4.8-1.cdh5.4.8.p0.4/bin/hadoop
   2           /opt/cloudera/parcels/CDH-4.7.1-1.cdh4.7.1.p0.47/bin/hadoop
   3           /opt/cloudera/parcels/CDH-5.8.2-1.cdh5.8.2.p0.3/bin/hadoop

Enter to keep the current selection[+], or type selection number: 3 #输入当前CDH集群的版本

4.验证 hadoop
[root@hadoopnn-01 bin]# which hadoop
/usr/bin/hadoop
[root@hadoopnn-01 bin]#

微信关注我们

原文链接：https://yq.aliyun.com/articles/578796

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Spark代码调优（一）

环境极其恶劣情况下： import org.apache.spark.SparkContext import org.apache.spark.rdd.RDD import org.apache.spark.sql.{DataFrame, Row, SQLContext} import org.apache.spark.sql.hive.HiveContext val sqlContext = new HiveContext(sc) val sql = sqlContext.sql("select * from ysylbs9 ").collect 中间发生报错： cluster.YarnScheduler: Lost executor 2 on zdbdsps025.iccc.com: Container marked as failed: container_e55_1478671093534_0624_01_000003 on host: zdbdsps025.iccc.com. Exit status: 143. Diagnostics: Container killed ...

2016-11-18

618

一、前言 Hive 是一个基于 Hadoop 文件系统之上的数据仓库架构。它可以将结构化的数据文件映射为一张数据库表，并提供简单的 sql 查询功能。还可以将 sql 语句转换为 MapReduce 任务运行。二、什么是hive Hive是建立在Hadoop上的数据仓库基础构架。它提供了一系列的工具，可以用来进行数据提取转化加载（ETL ），这是一种可以存储、查询和分析存储在 Hadoop 中的大规模数据的机制。Hive 定义了简单的类SQL查询语言，称为 HQL，它允许熟悉SQL的用户查询数据。同时，这个语言也允许熟悉 MapReduce 开发者的开发自定义的 mapper 和 reducer 来处理内建的 mapper 和 reducer 无法完成的复杂的分析工作。 Hive在hadoop生态圈中属于数据仓库的角色。他能够管理**hadoop中的数据，同时可以查询**hadoop中的数据。本质上讲，hive是一个SQL解析引擎。Hive可以把SQL查询转换为MapReduce中的job，然后在Hadoop上运行。三、hive的使用场景 Hive诞生于 facebook 的日志分...

2016-11-18

584

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。