Hadoop简单入门视频总结
hadoop简单介绍和简单实践视频教程 慕课网: https://www.imooc.com/video/7642 预备知识: liunx基本操作 java开发基础知识 google的大数据技术:MapReduce,BigTables,GFS 革命性变化: 成本降低,能用pc机就不用大型机和高端存储。 软件容错,硬件故障视为常态,通过软件保证可靠性。 简化并行分布式计算,无需控制节点同步和数据交换。 google分布式计算的开源实现 Hadoop ,由apache开发。 解决两个问题,分布式存储和分布式数据处理。 对应HDFS(分布式文件系统)和MapReduce(映射规约) Hdoop优势: 高扩展 低成本 成熟的生态圈 Hadoop 生态系统 Hive 小蜜蜂,牵引 Hbase zookeeper Hadoop安装 准备linux 租用云主机,比如阿里云。 jdk环境 centos下有所不同 1、下载 : yum install java-1.7.0-openjdk 2、配置环境变量 vim /etc/profile export JAVA_HOME=/jdk路径 export J...