大数据的下一个五年：Hadoop将推动数据平民化-低调大师

大数据的下一个五年：Hadoop将推动数据平民化

2017-07-31 508

美国联合市场研究(Allied Market Research)机构近日预测，到2020年，Hadoop的市场价值会超过500亿。Hadoop技术发展至今，走过了近九个年头，乘着大数据的东风，它以低廉的存储和快速的处理能力迅速在中小企业蔓延开来。而据联合市场研究预测，五年后，Hadoop会得到更广泛的部署，不止局限在中小企业。

几年前，还有评论人士称，Hadoop只能应用于企业10%的数据。但今日一份名为《2014年数据库技术现状调查》的数据显示，13%的受访者已经将Hadoop应用于产品生产和测试。未来，Hadoop有望在企业各个角落得到应用。而在性能和用途都有显著增长的同时，Hadoop的部署成本仍然会保持相对低廉。

数据平民化

随着大数据的快速发展，未来五年内，数据量和数据类型都会快速增长，那时，PB级的数据量已经不能被称为大数据了。随着数据的猛增，企业对数据分析和存储能力的需求必然大幅上升。相对于传统数据库和数据仓库技术，Hadoop的优势在于将数据分析和存储平民化。不懂技术的业务人员访问和分析数据将成为趋势。

照目前的创新速度和较低的准入门槛来看，未来五年会有更多的中小型企业持有自己的Hadoop架构。同时，Hadoop的发展会催生一大批初创企业加入到企业级IT领域，虽然短时间内新技术初创企业还不足以影响大的市场格局，但从收购和价值评估中我们可以看到，新兴技术企业的市场价值已经越来越大。

安全性和实时性

物联网作为IT发展的下一个技术热点，会成为变革IT的新力量。传统的数据库技术很难应对大量的传感器数据，而Hadoop将脱颖而出，承担更多的存储和分析功能。

未来五年里，Hadoop会逐渐向企业日常运营必不可少的系统发展。而要实现这一点，其实时分析的能力和安全性将成为掣肘。现在，我们已经看到Kerberos 和一些MapReduce组件用于保障Hadoop的安全性，Spark和Storm等工具正在为Hadoop加速。未来Hadoop的发展也需要这两方面能力的成熟。

本文作者：陈洪钰

来源：51CTO

微信关注我们

原文链接：https://yq.aliyun.com/articles/201301

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

对我国域名系统安全问题的思考

以互联网为基础的信息网络是进行国家信息化建设和实现国家信息化战略的基础设施，域名系统是互联网上大部分服务和应用正常运转和实施的基石，是互联网上最为关键的基础网络服务之一，事关互联网乃至国家的稳定和安全，是国家信息化建设的重中之重。通过对域名系统的攻击和利用可以造成巨大危害。伊拉克顶级域名失效事件、利比亚国家顶级域名失效事件等都表明，对域名系统的控制已成为一个有效的网络空间作战手段，可以在非常时期，瘫痪一个国家网络，造成信息孤岛，失去信息优势，丧失战争的主动权。域名系统已成为网络空间作战的重要目标。我国域名系统由于根域名服务器的不可控和域名系统本身的脆弱性，存在巨大的安全隐患。近年来，更是事件频发，对我互联网使用以及国家社会、政治、经济都造成了巨大的影响。因此域名系统相关问题已成为制约我国互联网发展的重要因素。互联网域名系统简介域名系统最主要的作用是完成对域名的解析，即把为便于记忆、用来标识互联网上某台计算机或一组计算机的名称，翻译转换为与其对应的IP地址域名系统是非常重要的互联网基础服务。如果没有域名系统，互联网上绝大多数应用，如网页浏览、电子邮件收发，就会因不知道通信对象具体...

2017-08-01

586

海量数据分成两块，一是系统建设技术，二，海量数据应用。先说系统建设，现在主流的技术是HADOOP，主要基于mapreduce的分布式框架。目前可以先学习这个。但是我的观点，在分布式系统出来之前，主要是集中式架构，如DB2，oracle。为什么现在用分布式架构，那是因为现在集中式架构受限于IO性能，出来速度慢，如果又一种硬件技术，可以很快地处理海量数据，性能上能满足需求，那么集中式架构优于分布式架构，因为集中式架构稳定，运维压力小。现在的集中式架构要么性能达不到要求，要么就是过于昂贵。我期待一种技术出现，可以非常快地传输和处理数据，那么集中式架构将再次进入人们眼球。再说海量数据应用。海量数据应用主要是数据挖掘和机器算法。具体有不同的应用场景，如个性化搜索和推荐，社交网络发现，精准营销，精准广告，实时最优路径，人工智能等等。看你想做系统支撑技术还是与业务结合的应用技术。如果现在学系统建设技术，可以读下如下书籍：如果学数据挖掘和机器算法，推荐先看数据挖掘导论，统计分析原理，Mahout，R,MATLAB 本文作者：佚名来源：51CTO

2017-08-01

568

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。