big data 文章汇总-低调大师

big data 文章汇总

2017-10-18 706

flink和spark的异同：
https://www.zhihu.com/question/30151872

presto 还是hive？
http://geek.csdn.net/news/detail/98839

devops的思考：
http://www.jianshu.com/p/a01f912f1f66

postgres的黑科技：
https://yq.aliyun.com/articles/2727

kafka的应用场景：
http://blog.csdn.net/code52/article/details/50475511

OLAP常用框架：spark-sql，presto，druid，kylin的区别
https://www.zhihu.com/question/41541395?sort=created

微信关注我们

原文链接：https://yq.aliyun.com/articles/350208

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

基于浏览器的 MapReduce

本文讲的是基于浏览器的 MapReduce，在分布式计算和海量数据中摸爬滚打了很久之后，你一定会感谢优雅的Google Map-Reduce 框架。它的map，emit和reduce模块既通用又简洁，这使它成为了一个强有力的工具。虽然 Google 公开了理论，但是底层的软件实现仍然是闭源的，而这可以说是他们最大的竞争优势之一（GFS，BigTable，等等）。当然，现在有很多开源的分支（Apache Hadoop，Disco，Skynet，以及其他），但是人们总会发现，优美简洁的理论和惨痛的实现之间存在的断层：诸如自定义协议，自定义服务器，文件系统，冗余，等等等等。问题来了，我们怎样能把这个差距缩短一点？大规模并行计算在我和Michael Nielsen进行了多次迭代、试错、深入的对话之后，一个念头突然闪现出来:

2017-10-19

649

Elasticsearch是一个分布式的文档(document)存储引擎。它能够实时存储并检索复杂数据结构——序列化的JSON文档。换言说，一旦文档被存储在Elasticsearch中，它就能够在集群的任一节点上被检索。当然，我们不仅须要存储数据。还要高速的批量查询。尽管已经有非常多NoSQL的解决方式同意我们以文档的形式存储对象，但它们依然须要考虑怎样查询这些数据，以及哪些字段须要被索引以便检索时更加高速。程序中大多的实体或对象可以被序列化为包括键值对的JSON对象，键(key)是字段(field)或属性(property)的名字，值(value)可以是字符串、数字、波尔类型、还有一个对象、值数组或者其它特殊类型，比方表示日期的字符串或者表示地理位置的对象。文档元数据（DocumentMetaData）：一个文档不仅仅有数据。它还包括了元数据(metadata)——关于文档的信息。三个必须的元数据节点是：节点说明 _index 文档存储的地方 _type 文档代表的对象的类 _id 文档的唯一标识 _index 索引(index)类似于关系型数据库里的“数据库”——它是...

2017-10-19

626

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。