搜索[hadoop]结果-低调大师优秀个人博客

精选列表

搜索[hadoop]，共8432篇文章

centos6安装hadoop

Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。

2017-11-27

hadoop怎么读？怎么发音

hadoop不是一个英文单词，是作者发明的词，hadoop名称来源作者小孩的一个}h毛填充黄色大象玩具。

2017-11-26

部署Hadoop高性能集群

~]# cp hadoop-2.2.0.tar.gz /home/hadoop/ [root@xuegod63 ~]# chown -R hadoop:hadoop /home/hadoop/hadoop

2017-11-23

Hadoop集群日常运维

（二）数据备份对于重要的数据，不能完全依赖HDFS，而是需要进行备份，注意以下几点（1）尽量异地备份（2）如果使用distcp备份至另一个hdfs集群，则不要使用同一版本的hadoop，避免hadoop

2017-11-23

Hadoop 安装详解--新手必备

步骤四：同样的配置文件，拷贝到其它两台slave节点中 [root@hdfs1hadoop-1.0.1]#scp-rconf/ root@hdfs2:/usr/local/hadoop-1.0.1/

2017-11-22

hadoop的部署以及应用

: /home/hadoop/hadoop-2 .7.0 /share/hadoop/common/lib/hadoop-auth-2 .7.0.jar: /home/hadoop/hadoop-2 .7.0

2017-11-22

Hadoop机架感知与balancer

版本：Apache Hadoop 1.0.3 Hadoop集群节点通常会跨很多个机架，增加节点的情况时有发生，而且很多时候节点的磁盘容量还不统一，有大有小，所以集群节点非常容易出现磁盘利用不平衡的情况，

2017-11-22

利用 Cloudera 实现 Hadoop （一）

前言 Hadoop 是一个实现了 MapReduce 计算模型的开源分布式并行编程框架。

2017-11-21

Hadoop里如何Mysql编程

mysql数据库读写 hadoop技术推出一度曾遭到关系数据库研究者的挑衅和批评，认为MapReduce不具有关系数据库中的结构化数据存储和处理能力。

2017-11-21

数据到hadoop的迁移

log日志数据导入到hdfs上步骤 1 在 elephant 节点上先安装flume sudo yum install --assumeyes flume-ng 2 创建配置文件 vi /etc/hadoop

2017-11-17

Hadoop MapReduce（FlowCount） Java编程

; import java.io.IOException; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text

2017-11-16

hadoop状态分析系统chukwa

Apache 的开源项目 hadoop，作为一个分布式存储和计算系统，已经被业界广泛应用。很多大型企业都有了各自基于 hadoop 的应用和相关扩展。

2017-11-15

hadoop2.6 HA部署

硬件环境：四台虚拟机，hadoop1~hadoop4，3G内存，60G硬盘，2核CPU 软件环境：CentOS6.5，hadoop-2.6.0-cdh5.8.2，JDK1.7 部署规划： hadoop1

2017-11-15

hadoop初探--性能分析1

研究Hadoop也有2个星期了，由于之前有MooseFS的基础，所以学习Hadoop的HDFS部分还算比较顺利。

2017-11-15

Hadoop集群(五) Hive安装

hdfs安装，可以参考 Hadoop集群(一) Zookeeper搭建 Hadoop集群(二) HDFS搭建 Hadoop集群(三) Hbase搭建 Hive软件的下载，我使用版本是hive-1.2.1

2017-11-15

Hadoop集群(二) HDFS搭建

请参考： Hadoop集群(一) Zookeeper搭建 Hadoop集群(三) Hbase搭建 Hadoop集群(四) Hadoop升级下面开始HDFS的安装 HDFS主机分配 1 2 3 192.168.67.101c6701

2017-11-15

Hadoop集群(三) Hbase搭建

系列文章： Hadoop集群(一) Zookeeper搭建 Hadoop集群(二) HDFS搭建 Hadoop集群(四) Hadoop升级下面开始Hbase的安装。

2017-11-15

cloudera 部署Hadoop 更方便

tasktracker //比如安装 namenode 为: yum install hadoop-0.20-datanode，不同角色安装不同服务 6 安装后 hadoop 目录 //hadoop配置文件目录

2017-11-14

1. dfs.datanode.max.transfer.threads 修改dfs.datanode.max.transfer.threads=4096 (如果运行HBase的话建议为16384)，指定用于在DataNode间传输block数据的最大线程数，老版本的对应参数为dfs.datanode.max.xcievers。 2. dfs.datanode.balance.bandwidthPerSec 修改dfs.datanode.balance.bandwidthPerSec=52428800，指定DataNode用于balancer的带宽为50MB，这个根据情况而定，如果交换机性能好点的，完全可以设定100MB，单位是Byte，如果机器的网卡和交换机的带宽有限，可以适当降低该速度，比如10MB，默认是1048576(1MB)。 hdfs dfsadmin-setBalancerBandwidth 52428800 3. dfs.balancer.block-move.timeout 以毫秒为单位移动的最大时间。如果这个设置大于0，平衡器将停止等待一个块移动完成。在典型的集群中，3到5分钟的超时是合理的。如果超时发生在很大比例的块移动中，则需要增加。它也可能是太多的工作被分派，并且许多节点的带宽总是超过带宽限制。在这种情况下，可能需要调整其他平衡器参数。默认情况下，它是禁用的。 4. dfs.balancer.max-no-move-interval 如果这个指定的时间量已经过去，并且没有一个块被移出源DataNode，那么将会有更多的努力在当前的平衡迭代中移出这个DataNode的块。文章可以转载，必须以链接形式标明出处。本文转自张冲andy 博客园博客，如需转载请自行联系原作者原文链接：http://www.cnblogs.com/andy6/p/8397791.html

2017-11-14

hadoop常用服务管理命令

，可用于启动单一的服务依次调用hadoop-config.sh和hadoop-env.sh 加载相关的配置和环境变量，比如nn的jvm配置等（hadoop-env.sh）在这里可以设置 1 export

2017-11-14

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

精选列表

centos6安装hadoop

hadoop怎么读？怎么发音

部署Hadoop高性能集群

Hadoop集群日常运维

Hadoop 安装详解--新手必备

hadoop的部署以及应用

Hadoop机架感知与balancer

利用 Cloudera 实现 Hadoop （一）

Hadoop里如何Mysql编程

数据到hadoop的迁移

Hadoop MapReduce（FlowCount） Java编程

hadoop状态分析系统chukwa

hadoop2.6 HA部署

hadoop初探--性能分析1

Hadoop集群(五) Hive安装

Hadoop集群(二) HDFS搭建

Hadoop集群(三) Hbase搭建

cloudera 部署Hadoop 更方便

Hadoop之 Balancer平衡速度

hadoop常用服务管理命令

资源下载

Mario

腾讯云软件源

Spring

Rocky Linux

欢迎您来访！