招募贴：Hadoop专业解决方案招募义务翻译人员-低调大师

招募贴：Hadoop专业解决方案招募义务翻译人员

2014-01-02 626 89

一、招募启事

招募贴：Hadoop专业解决方案招募义务翻译人员，英文原著名称：《Wrox.Professional.Hadoop.Solutions》。愿意参与到此项工作中来的请加群：313702010

欢迎大家踊跃报名。

二、图书大纲

中文部分：

chapter1：大数据和Hadoop生态圈

　　1.1 当大数据遇到Hadoop
　　1.2 Hadoop生态圈
　　1.3 Hadoop核心组件
　　1.4 Hadoop版本分发
　　1.5 基于Hadoop开发企业级应用

chapter2：数据存储之Hadoop

　　2.1 HDFS
　　2.2 HBase
　　2.3 HDFS和HBase相结合，进行实际数据存储
　　2.4 使用Apache Avro
　　2.5 使用HCatalog管理元数据
　　2.6 Hadoop数据组织模式设计

chapter3：数据计算之MapReduce

　　3.1 认识MapReduce
　　3.2 第一个MapReduce应用
　　3.3 设计MapReduce实现
　　3.4 总结

chapter4：自定义MapReduce执行

　　4.1 通过InputFormat控制MapReduce执行
　　4.2 使用自定义RecordReaders读取你的数据
　　4.3 使用OutputFormats组织输出文件
　　4.4 使用Combiner优化MapReduce执行
　　4.5 使用Partitioners控制Reducer执行
　　4.6 使用非Java语言访问Hadoop
　　4.7 总结

chapter5：构建可重用的MapReduce应用

　　5.1 MapReduce程序单元测试
　　5.2 Eclipse本地应用程序测试
　　5.3 使用日志进行Hadoop测试
　　5.4 使用Job Counters计数
　　5.5 MapReduce防御式编程
　　5.6 总结

chapter6：自动数据处理之Oozie

chapter7：使用Oozie

chapter8：Oozie高级功能

chapter9：实时Hadoop

　　9.1 现实世界中的实时应用系统
　　9.2 使用HBase实现实时应用系统
　　9.3 使用特定的实时Hadoop查询系统
　　9.4 使用基于Hadoop的事件处理系统
　　9.5 总结

chapter10：Hadoop安全

　　10.1 历史回顾：理解Hadoop安全机制的挑战
　　10.2 身份认证
　　10.3 权限管理
　　10.4 Oozie身份认证和权限管理
　　10.5 网络加密
　　10.6 使用Rhino增强安全机制
　　10.7 Hadoop安全最佳实践
　　10.8 总结

chapter11：在AWS上运行Hadoop应用程序

chapter12：为Hadoop实现构建企业级安全解决方案

chapter13：Hadoop的发展趋势

英文部分：

作者：张子良
出处：http://www.cnblogs.com/hadoopdev
本文版权归作者所有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出原文连接，否则保留追究法律责任的权利。

微信关注我们

原文链接：https://yq.aliyun.com/articles/438574

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2014-01-03 00:00:00

Hadoop文件系统支持释疑之S3

一、引言 Hadoop版本提供了对多种文件系统的支持，但是这些文件系统是以何种方式实现的，其实现原理是什么以前并没有深究过。今天正好有人咨询我这个问题：Hadoop对S3的支持原理是什么？特此总结一下。Hadoop支持的文件系统包括：文件系统 URI前缀 hadoop的具体实现类 Local file fs.LocalFileSystem HDFS hdfs hdfs.DistributedFileSystem HFTP hftp hdfs.HftpFileSystem HSFTP hsftp hdfs.HsftpFileSystem HAR har fs.HarFileSystem KFS kfs fs.kfs.KosmosFileSystem FTP ftp fs.ftp.FTPFileSystem S3 (native) s3n fs.s3native.NativeS3FileSystem S3 (blockbased) s3 fs.s3.S3FileSystem 二、争议观点 1.Hadoop对S3文件系统的支持是通过自己实现S3文件系统来做的吗？ 2.Hadoop对S3文...

626

2014-01-07 00:00:00

谷歌大牛Jeff Dean是如何成为互联网战神的

原文链接：http://bugfixed.org/?p=307 “光在真空中的速度曾经是大约每小时35英里，然后Jeff Dean花了一个周末优化了基础物理学。”——出自“关于Jeff Dean的事实” 其实，“关于Jeff Dean的事实”这个G+帖中描述的并非是真实的。不过有人大费周折为他建立了一个类似于“关于Chuck Norris 的事实”这样的网站，这倒是件不同寻常的事。这是因为Jeff Dean是一位软件工程师，而软件工程师们通常是不会像武术界的战神Chuck Norris那样的。一方面，他们不是独行侠，软件开发从本质上来讲是一个协作过程。另一方面，他们也从来不会像这个视频里面的Chuck Norris那样用冲锋枪来打牛仔。译注：Chuck Norris（查克·诺里斯）是空手道世界冠军、美国电影演员。他有另一个更为人所共知的译名“罗礼士”，出自功夫名片《猛龙过江》。他发展电影事业初期，在李小龙执导的武打电影《猛龙过江》中饰演一名空手道高手Colt，与李小龙在罗马斗兽场决斗，公认是经典的武打场面。（摘自维基百科） Jeff Dean 然而，在2007年的愚人节，一些慕名而...

658

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。