Ubuntu下 Hadoop 1.2.1 配置安装 - 大T的专栏 - 博客频道 - CSDN.NE

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
hadoop整体结构图及服务组件详解
hadoop服务组件简单解释 1、core 分布式系统和通用IO组件和接口(序列化、java远程调用等等服务) 2、avro 支持跨语言过程调用,持久数据存储的数据序列化系统 3、MapReduce 构建在廉价的pc机器上分布式数据处理模型和运行环境 4、hdfs 构建廉价的pc机器上分布式文件系统 5、pig 处理海量数据集的数据流语言和运行环境 ,pig运行在HDFS和MapReduce之上 6、HBase 分布式面向列的数据库 ,HBase使用HDFS作为底层存储, 同时使用MapReduce支持批处理模式的计算机和随机查询 7、 Zookeeper 提供分布式、高效的协作服务以及分布式锁这样的原子操作、可以用来构建分布式应用 8、hive 分布式数据仓库 、 Hive使用Hdfs存储数据,提供类似sql的语句(转换为MapReduce任务) 查询数据 9、chukwa 分布式数据采集和分析系统 、 使用HDFS 存储数据 、 使用MapReduce输出分析报告
- 下一篇
大数据利器
大数据利器.xls 类别 名称 官网 备注 查询引擎 Phoenix https://phoenix.apache.org/ Salesforce公司出品,ApacheHBase之上的一个SQL中间层,完全使用Java编写 Kylin http://kylin.io eBay开源的基于Hadoop的分布式OLAP分析引擎,旨在减少Hadoop在10亿行以上数据级别的情况下的查询延迟 Stinger http://hortonworks.com/labs/stinger/ http://hortonworks.com/hadoop/tez/ 原叫Tez,下一代Hive,Hortonworks主导开发,运行在YARN上的DAG计算框架 Presto http://prestodb.io/ Facebook开源 Shark http://shark.cs.berkeley.edu/ Spark上的SQL执行引擎,已演化成Spark-SQL和HiveonSpark Pig http://pig.apache.org/ 基于HadoopMapReduce的脚本语言 ClouderaImpala ...
相关文章
文章评论
共有0条评论来说两句吧...