《深入理解Hadoop（原书第2版）》——2.3Hadoop系统的组成-低调大师

《深入理解Hadoop（原书第2版）》——2.3Hadoop系统的组成

2017-05-01 582

本节书摘来自华章计算机《深入理解Hadoop（原书第2版）》一书中的第2章，第2.3节，作者 [美]萨米尔·瓦德卡（Sameer Wadkar），马杜·西德林埃（Madhu Siddalingaiah），杰森·文纳（Jason Venner），译于博，冯傲风，更多章节内容可以访问云栖社区“华章计算机”公众号查看。

2.3Hadoop系统的组成

本节内容会细致深入地讲解Hadoop系统的各个组成部分。我们先介绍构成Hadoop 1.x 系统的组件，再介绍构成Hadoop 2.x 系统的新组件。宏观上说，Hadoop 1.x系统有以下几个守护进程：

名称节点（NameNode）：维护着存储在HDFS上的所有文件的元数据信息。这些元数据信息包括组成文件的数据块信息，及这些数据块在数据节点上的位置。正如你将看到的，这个组件正是使用Hadoop

微信关注我们

原文链接：https://yq.aliyun.com/articles/109112

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

IT人的前沿技术书单：学不到老，就活不到老

从农耕时代到工业时代到信息时代，技术力量不断地推动人类创造新的世界。而今天，互联网、云计算、大数据以及人工智能等新技术，正以改变一切的力量，在全球范围掀起一场影响人类所有层面的深刻变革，人类正站在一个新的时代到来的前沿。在这个变革的时代，各种颠覆性技术不断涌现出来，互联网赋予每一个人无限的可能，让个人力量增强、个人价值释放。互联网让普通的个人越过几百年塑造的专业屏障、权威评价和路径依赖，获得平等而充分的展现机会，个人和个人力量的汇聚释放出以往不曾有过的创造力与自我价值。而云计算与大数据技术的飞速发展让万物相连和无处不在的智能化成为普遍，人工智能的发展和进步使得计算机、互联网与生物技术的结合正呈现出人机共同进化的可能，甚至有人惊呼“奇点临近”。 IT人作为这个互联网时代的弄潮儿，我们天生就处于技术浪潮的中心地带，技术的变革让我们不得不掌握终生学习的能力和多元化的知识领域，技术的浪潮时而冲天而起，时而又归于平静，但是始终在推动着人类社会向前发展。你我，在这场技术引发的世界改革浪潮中，都置身其中，我们必须时刻准备好站在浪潮之巅的准备，准备迎接技术新世界。本文为大家选取了一些有关云计算、大数...

2017-05-02

545

Facebook如何用NoSQL实现高吞吐低延迟的数据存储？

Facebook从成立之初作为一个小型区域型社交网站，到如今演变成为全球最大的社交网站，架构经历过几次重大的迭代。其中，Facebook的存储也从小变大，从单一变得更具有多样性，从而应对各种拓展性问题。本文将首先从Facebook的升级转变开始，谈到数据存储能力提升对于公司Scalability的巨大影响，然后介绍Facebook在Canssandra和HBase之间的选择，从而引申出NoSQL将要解决的问题领域，最后集中介绍了NoSQL Pattern的基本组成。希望看完本文之后，大家可以对NoSQL要解决的问题，NoSQL的基本构成，以及NoSQL对于Facebook这样大型公司的重要性有一定的认识。 Facebook的数据存储进化对于Facebook在数据处理能力上的进化，可以先列几个文章标题来直观感受一下： New Facebook Chat Feature Scales To 70 Million Users Using Erlang, May 14, 2008. Facebook's New Realtime Messaging System: HBase to St...

2017-05-02

511

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。