Cannot initialize Cluster. Please check your configuration for mapredu...-低调大师

Cannot initialize Cluster. Please check your configuration for mapredu...

2016-12-07 536

log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory).  
log4j:WARN Please initialize the log4j system properly.  
log4j:WARN See http://logging.apache.org/log4j/1.2/faq.html#noconfig for more info.  
Exception in thread "main" java.io.IOException: Cannot initialize Cluster. Please check your configuration for mapreduce.framework.name and the correspond server addresses.  
    at org.apache.hadoop.mapreduce.Cluster.initialize(Cluster.java:120)  
    at org.apache.hadoop.mapreduce.Cluster.<init>(Cluster.java:82)  
    at org.apache.hadoop.mapreduce.Cluster.<init>(Cluster.java:75)  
    at org.apache.hadoop.mapreduce.Job$9.run(Job.java:1238)  
    at org.apache.hadoop.mapreduce.Job$9.run(Job.java:1234)  
    at java.security.AccessController.doPrivileged(Native Method)  
    at javax.security.auth.Subject.doAs(Unknown Source)  
    at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1491)  
    at org.apache.hadoop.mapreduce.Job.connect(Job.java:1233)  
    at org.apache.hadoop.mapreduce.Job.submit(Job.java:1262)  
    at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:1286)  
    at com.gome.accesslog.statistic.WordCountExample.main(WordCountExample.java:72)

　　缺少Jar包：Hadoop-mapreduce-client-common-2.2.0.jar

<!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-mapreduce-client-common -->
	<dependency>
	    <groupId>org.apache.hadoop</groupId>
	    <artifactId>hadoop-mapreduce-client-common</artifactId>
	    <version>2.6.4</version>
	</dependency>

微信关注我们

原文链接：https://yq.aliyun.com/articles/288404

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

哈，我自己翻译的小书，马上就完成了，是讲用python处理大数据框架hadoop,spark的

花了一些时间，但感觉很值得。 Big Data, MapReduce, Hadoop, and Spark with Python Master Big Data Analytics and Data Wrangling with MapReduce Fundamentals using Hadoop, Spark, and Python 作者: The LazyProgrammer (https://lazyprogrammer.me)

2016-12-07

797

客户端Client 客户端 Client 是整个 HBase 系统的入口。使用者直接通过客户端操作 HBase。客户端使用 HBase 的 RPC 机制与 HMaster 和 RegionServer进行通信。对于管理类操作Client 与 HMaster 进行 RPC 通信对于数据读写类操作Client 与RegionServer 进行 RPC 交互。这里客户端可以是多个并不限定是原生 Java 接口还有 Thrift、Avro、Rest等客户端模式甚至 MapReduce 也可以算作一种客户端。协调服务组件Zookeeper ZooKeeper Quorum队列负责管理 HBase 中多 HMaster 的选举、服务器之间状态同步等。再具体一些就是HBase 中 ZooKeeper 实例负责的协调工作有存储 HBase 元数据信息、实时监控 RegionServer、存储所有 Region 的寻址入口当然还有最常见的功能就是保证 HBase 集群中只有一个HMaster 节点主节点Hmaster HMaster 没有单点问题在HBase 中可以启动多个 H...

2016-12-07

573

资源下载

更多资源

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。