开源大数据周刊-第50期-低调大师

开源大数据周刊-第50期

2017-04-26 623 89

资讯

谷歌TPU之后还有高通，人工智能芯片竞赛已经展开

谷歌有了自己的人工智能芯片TPU，现在构建适用于深度学习的计算芯片已成为所有科技巨头共同的发展目标，英特尔、高通、英伟达等都在人工智能芯片上投入巨大，芯片公司正在争相占领这个新的市场。

火力全开：大数据领域2017年全景剖析

大数据技术用了多年时间进行演化，才从一种看起来很酷的新技术变成企业在生产环境中实际部署的核心企业级系统。本文从人工智能领域、企业并购情况、云端大数据竞争等方面展示了数据生态系统在2017年全景视图，并针对这一行业的见解总结为关键趋势。

Apache软件基金会宣布Apache® CarbonData™成为顶级项目

Apache CarbonData是由华为开源贡献的大数据高效存储格式解决方案。针对当前大数据领域分析场景需求各异而导致的存储冗余问题，CarbonData

微信关注我们

原文链接：https://yq.aliyun.com/articles/74586

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2017-04-26 00:00:00

YARN-架构

标签（空格分隔）：大数据 YARN [toc] 原文：http://hadoop.apache.org/docs/r2.6.4/hadoop-yarn/hadoop-yarn-site/YARN.html Hadoop下一代MapReduce（YARN） MapReduce在hadoop-0.23中经历了完整的革新，也就是引入了MapReduce 2.0（MRv2），俗称YARN。 MRv2的核心思想是将原来JobTracker的两个主要功能拆分，也就是将资源管理（resource management）和调度与监控（scheduling/monitoring)分离为两个daemon进程。其思想表现为持有一个全局的ResourceManager（RM）以及每个应用有一个ApplicationMaster（AM）。一个应用对应一个传统的MR

586

2017-04-27 00:00:00

sqoop关系型数据迁移原理以及map端内存为何不会爆掉窥探

　序：map客户端使用jdbc向数据库发送查询语句，将会拿到所有数据到map的客户端，安装jdbc的原理，数据全部缓存在内存中，但是内存没有出现爆掉情况，这是因为1.3以后，对jdbc进行了优化，改进jdbc内部原理，将数据写入磁盘存储了。原文和作者一起讨论:http://www.cnblogs.com/intsmaze/p/6775034.html Sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。Sqoop架构非常简单，其整合了Hive、Hbase和Oozie，通过map-reduce任务来传输数据，从而提供并发特性和容错。导入数据：MySQL,Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统。导出数据：从Hadoop的文件系统中导出数据到关系数据库mysql等。工作机制将导入或导出命令翻译成mapreduce程序来实现，在翻译出的mapreduce中主要是对inputformat和outputformat进行定制。 Sqoop的数据导入从RDBMS导入单个表到HDFS。表中的每一行被视为HDFS的...

500

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Oracle Database，又名Oracle RDBMS

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。