大象的崛起！Hadoop七年发展风雨录-低调大师

大象的崛起！Hadoop七年发展风雨录

2017-09-03 640

文章讲的是 大象的崛起！Hadoop七年发展风雨录，在互联网这个领域一直有这样的说法：“如果老二无法战胜老大，那么就把老大赖以生存的东西开源吧”。当年Yahoo!与Google还是处在强烈竞争关系时候，招聘了Doug(Hadoop创始人)，把Google老大赖以生存的DFS与Map-Reduce开源了，开始了Hadoop的童年时期。差不多在2008年的时候，Hadoop才算逐渐成熟。

　　从初创到现在，Hadoop经过了至少7年的积累，现在的Hadoop不仅是当年的老二Yahoo的专用产品了，从Hadoop长长的用户名单中，可以看到Facebook、Linkedin、Amazon，可以看到EMC、eBay、Twitter、IBM、Microsoft,、Apple、HP...国内的公司有淘宝、百度等等。

▲

　　本文将对Hadoop七年（2004-2011）的发展历程进行梳理。读完本文后，将不难看出，Hadoop的发展基本上经历了这样一个过程：从一个开源的Apache基金会项目，随着越来越多的用户的加入，不断地使用、贡献和完善，形成一个强大的生态系统，从2009年开始，随着云计算和大数据的发展，Hadoop作为海量数据分析的最佳解决方案，开始受到许多IT厂商的关注，从而出现了许多Hadoop的商业版以及支持Hadoop的产品，包括软件和硬件。

原文发布时间为：2011-9-07

本文作者：唐蓉

本文来自云栖社区合作伙伴IT168，了解相关信息可以关注IT168。

微信关注我们

原文链接：https://yq.aliyun.com/articles/224124

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

快数据如何在物联网高速公路上驱动分析

大数据时代，快数据（fast data）有望给企业带来新的机遇。智能手机、传感器和社交媒体产生了上百亿个数据节点，如果你没有能力对这些数据节点以及物联网作出响应，那快数据带来的商机将与你擦肩而过。对于很多商业分析应用程序，快数据的分析和处理是大数据项目中不可避免的难题。每当数据科学家从他们的大数据集（静态的）挖掘出新内容时，业务人员立刻就会去想从中赚钱的方法，同样，动态数据中巨大的经济利益也会促使快数据在商业中受到更多的重视，相信未来快数据会在商业中发挥更大的作用。 TIBCO这个公司从字面上可以理解为“有信息总线的IT企业”，它旨在为各种企业系统（如股票市场和交易应用程序）之间提供高速、低延迟的连接。现在该公司致力于发展物联网（IoT）和快数据相关的技术，并将其作为自己的“两个第二优势”。 TIBCO市场部门高级总监告诉我们：“快数据首先要解决的是数据访问问题，即首先得访问到数据，现在我们正努力捕获所有不在防火墙保护范围内的数据，不管来自社交网络还是其他有API的来源。例如，零售商使用BusinessWorks（该公司近期公布的旗舰版数据集成平台）可以通过客户的智能手机捕获客户地...

2017-09-04

509

大数据策略会失败吗?是时候该讨论一下这个问题了。企业才刚刚掌握如何集成ERP(企业资源规划)及其他业务应用来消除业务流程中妨碍效率的孤岛。面向服务架构、软件即服务、云计算及其他现代化解决方案在协助企业实现大型应用集成过程中都发挥了一定的作用。但是如今，在大量数据的环境中组织正面临新的一系列挑战。更清楚地说，它不是一条数据流。它是由许多独立的数据流组成的，使数据互相分离或者就像以前的企业应用那样将孤立起来。这不是因循守旧这些数据中有许多都不像那些企业用处理的数据那样。在大规模结构化数据环境中，数据激增所面临的大部分挑战都可以通过扩展、冗余及分析而得到解决。大数据时代，以上这些挑战仅仅是企业必须解决的小部分问题。如今收集到的数据类型来源非常广泛。数据通过嵌入式传感器、RFID芯片、箱子和音像供给、文档和图像文件、图像等其他方式而传输到数据库中。社交媒体会改变数据应有的形象。这还不包括业务伙伴之间所共享过的大数据。组织不再描述或者规定数据所要展现的形式。实际上，如果尝试这样做，会大大地降低数据本身的价值。企业仅能预测一定数量的潜在情节或者反应。无论他们创建了多少复选框或者数据文件，总会...

2017-09-04

445

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。