《大数据系统构建：可扩展实时数据系统构建原理与最佳实践》一1.8　技术上的最新趋势-低调大师

《大数据系统构建：可扩展实时数据系统构建原理与最佳实践》一1.8　技术上的最新趋势

2017-05-01 621

本节书摘来自华章出版社《大数据系统构建：可扩展实时数据系统构建原理与最佳实践》一书中的第1章，第1.8节，南森·马茨（Nathan Marz） [美]　詹姆斯·沃伦（JamesWarren）　著马延辉　向　磊　魏东琦　译，更多章节内容可以访问云栖社区“华章计算机”公众号查看。

1.8　技术上的最新趋势

理解本书中所使用的工具的背景是很有帮助的。技术上的众多趋势深深影响着构建大数据系统的方式。

1.8.1　CPU并不是越来越快

人们已经开始意识到单个CPU运行速度的物理限制。这意味着，如果想扩展到更多的数据，你必须能够并行化计算。
这导致了无共享的并行算法及其相应系统的增加，比如MapReduce。不是只通过购买更好的机器进行扩展（这被称为垂直扩展），而是通过添加更多的机器进行扩展（这被称为水平扩展）。

1.8.2　弹性云

技术上的另一个趋

微信关注我们

原文链接：https://yq.aliyun.com/articles/89626

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

《MapReduce 2.0源码分析与编程实战》一导读

前言 MapReduce 2.0源码分析与编程实战我们处于一个数据大爆炸的时代。每时每刻、各行各业都在产生和积累海量的数据内容。这些数据中蕴含着进行业务活动、获取商业信息、做出管理决策的重要信息。如何处理这些数据并获取有价值的信息，是众多组织和单位面临的共同问题。而这个问题的解决又依赖两项技术，一是能够对产生的业务数据进行统一管理和综合，并且能够无限扩展存储空间；二是能够有效处理获得的海量数据，在限定时间内获得处理结果的处理程序。因此，寻求一个合理可靠的大数据处理决方案是目前数据处理的热点与重点。很多行业领导者把对大数据的处理看成互联网之后又一个能够获得竞争优势的关键性因素，把大数据处理能力作为其核心商业竞争力加以发展。这更凸显了大数据的战略意义。目录第1章大象也会跳舞1.1 大数据时代 1.2 大数据分析时代1.3 简单、粗暴、有效——这就是Hadoop1.4 MapReduce与Hadoop1.5　看，大象也会跳舞 1.6 本章小结第2章大象的肚子——HDFS文件系统详解第3章 “吃下去吐出来”——Hadoop文件I/O系统详解第4章 “大象的大脑”——MapRedu...

2017-05-02

674

本节书摘来异步社区《HBase权威指南》一书中的第3章，第3.3节，作者：【美】Lars George 译者：代志远 , 刘佳 , 蒋杰责编：杨海玲，更多章节内容可以访问云栖社区“异步社区”公众号查看。 3.3　批量处理操作现在我们已经介绍过添加、检索和删除表中数据的操作了，不过前面介绍的操作都是基于单个实例或基于列表的操作。这一节将会介绍一些API调用，这些调用可以批量处理跨多行的不同操作。文字事实上，许多基于列表的操作，如delete(List deletes)或者get(List gets)，都是基于batch()方法实现的。它们都是一些为了方便用户使用而保留的方法。如果你是新手，推荐使用batch()方法进行所有操作。下面的客户端API方法提供了批量处理操作。用户可能注意到这里引入了一个新的名为Row的类，它是Put、Get和Delete的祖先，或者说是父类。 void batch(List< Row> actions,Object[] results) throws IOException,InterruptedException Object[] b...

2017-05-02

443

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。