搜索[hadoop]结果-低调大师优秀个人博客

精选列表

搜索[hadoop]，共8437篇文章

centos6安装hadoop

Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。

2017-11-27

hadoop怎么读？怎么发音

hadoop不是一个英文单词，是作者发明的词，hadoop名称来源作者小孩的一个}h毛填充黄色大象玩具。

2017-11-26

部署Hadoop高性能集群

~]# cp hadoop-2.2.0.tar.gz /home/hadoop/ [root@xuegod63 ~]# chown -R hadoop:hadoop /home/hadoop/hadoop

2017-11-23

Hadoop集群日常运维

（二）数据备份对于重要的数据，不能完全依赖HDFS，而是需要进行备份，注意以下几点（1）尽量异地备份（2）如果使用distcp备份至另一个hdfs集群，则不要使用同一版本的hadoop，避免hadoop

2017-11-23

Hadoop 安装详解--新手必备

步骤四：同样的配置文件，拷贝到其它两台slave节点中 [root@hdfs1hadoop-1.0.1]#scp-rconf/ root@hdfs2:/usr/local/hadoop-1.0.1/

2017-11-22

hadoop的部署以及应用

: /home/hadoop/hadoop-2 .7.0 /share/hadoop/common/lib/hadoop-auth-2 .7.0.jar: /home/hadoop/hadoop-2 .7.0

2017-11-22

Hadoop机架感知与balancer

版本：Apache Hadoop 1.0.3 Hadoop集群节点通常会跨很多个机架，增加节点的情况时有发生，而且很多时候节点的磁盘容量还不统一，有大有小，所以集群节点非常容易出现磁盘利用不平衡的情况，

2017-11-22

利用 Cloudera 实现 Hadoop （一）

前言 Hadoop 是一个实现了 MapReduce 计算模型的开源分布式并行编程框架。

2017-11-21

Hadoop里如何Mysql编程

mysql数据库读写 hadoop技术推出一度曾遭到关系数据库研究者的挑衅和批评，认为MapReduce不具有关系数据库中的结构化数据存储和处理能力。

2017-11-21

数据到hadoop的迁移

log日志数据导入到hdfs上步骤 1 在 elephant 节点上先安装flume sudo yum install --assumeyes flume-ng 2 创建配置文件 vi /etc/hadoop

2017-11-17

Hadoop MapReduce（FlowCount） Java编程

; import java.io.IOException; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text

2017-11-16

hadoop状态分析系统chukwa

Apache 的开源项目 hadoop，作为一个分布式存储和计算系统，已经被业界广泛应用。很多大型企业都有了各自基于 hadoop 的应用和相关扩展。

2017-11-15

Hadoop集群(五) Hive安装

hdfs安装，可以参考 Hadoop集群(一) Zookeeper搭建 Hadoop集群(二) HDFS搭建 Hadoop集群(三) Hbase搭建 Hive软件的下载，我使用版本是hive-1.2.1

2017-11-15

Hadoop集群(二) HDFS搭建

请参考： Hadoop集群(一) Zookeeper搭建 Hadoop集群(三) Hbase搭建 Hadoop集群(四) Hadoop升级下面开始HDFS的安装 HDFS主机分配 1 2 3 192.168.67.101c6701

2017-11-15

Hadoop集群(三) Hbase搭建

系列文章： Hadoop集群(一) Zookeeper搭建 Hadoop集群(二) HDFS搭建 Hadoop集群(四) Hadoop升级下面开始Hbase的安装。

2017-11-15

hadoop2.6 HA部署

硬件环境：四台虚拟机，hadoop1~hadoop4，3G内存，60G硬盘，2核CPU 软件环境：CentOS6.5，hadoop-2.6.0-cdh5.8.2，JDK1.7 部署规划： hadoop1

2017-11-15

hadoop初探--性能分析1

研究Hadoop也有2个星期了，由于之前有MooseFS的基础，所以学习Hadoop的HDFS部分还算比较顺利。

2017-11-15

hadoop原理浅析及安装

useradd hadoop 下载hadoop最新版：http://apache.freelamp.com/hadoop/core/hadoop-0.20.2/hadoop-0.20.2.tar.gz

2017-11-14

1. dfs.datanode.max.transfer.threads 修改dfs.datanode.max.transfer.threads=4096 (如果运行HBase的话建议为16384)，指定用于在DataNode间传输block数据的最大线程数，老版本的对应参数为dfs.datanode.max.xcievers。 2. dfs.datanode.balance.bandwidthPerSec 修改dfs.datanode.balance.bandwidthPerSec=52428800，指定DataNode用于balancer的带宽为50MB，这个根据情况而定，如果交换机性能好点的，完全可以设定100MB，单位是Byte，如果机器的网卡和交换机的带宽有限，可以适当降低该速度，比如10MB，默认是1048576(1MB)。 hdfs dfsadmin-setBalancerBandwidth 52428800 3. dfs.balancer.block-move.timeout 以毫秒为单位移动的最大时间。如果这个设置大于0，平衡器将停止等待一个块移动完成。在典型的集群中，3到5分钟的超时是合理的。如果超时发生在很大比例的块移动中，则需要增加。它也可能是太多的工作被分派，并且许多节点的带宽总是超过带宽限制。在这种情况下，可能需要调整其他平衡器参数。默认情况下，它是禁用的。 4. dfs.balancer.max-no-move-interval 如果这个指定的时间量已经过去，并且没有一个块被移出源DataNode，那么将会有更多的努力在当前的平衡迭代中移出这个DataNode的块。文章可以转载，必须以链接形式标明出处。本文转自张冲andy 博客园博客，如需转载请自行联系原作者原文链接：http://www.cnblogs.com/andy6/p/8397791.html

2017-11-14

hadoop常用服务管理命令

，可用于启动单一的服务依次调用hadoop-config.sh和hadoop-env.sh 加载相关的配置和环境变量，比如nn的jvm配置等（hadoop-env.sh）在这里可以设置 1 export

2017-11-14

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

精选列表

centos6安装hadoop

hadoop怎么读？怎么发音

部署Hadoop高性能集群

Hadoop集群日常运维

Hadoop 安装详解--新手必备

hadoop的部署以及应用

Hadoop机架感知与balancer

利用 Cloudera 实现 Hadoop （一）

Hadoop里如何Mysql编程

数据到hadoop的迁移

Hadoop MapReduce（FlowCount） Java编程

hadoop状态分析系统chukwa

Hadoop集群(五) Hive安装

Hadoop集群(二) HDFS搭建

Hadoop集群(三) Hbase搭建

hadoop2.6 HA部署

hadoop初探--性能分析1

hadoop原理浅析及安装

Hadoop之 Balancer平衡速度

hadoop常用服务管理命令

资源下载

优质分享App

Mario

Spring

Sublime Text

欢迎您来访！