开源大数据周刊-第57期-低调大师

开源大数据周刊-第57期

2017-06-19 693 89

阿里云E-Mapreduce动态:

ECM功能上线北京region，用户可以通过EMR-3.2.0版本创建新集群体验，ECM提供组件的配置修改/起停等操作

资讯

DigitalGlobe借助亚马逊AWS Snowmobile迈向云端
DigitalGlobe是AWS Snowmobile数据传输服务的全球第一位、也是目前为止最大的一位客户。当数据摄取完成后，在DigitalGlobe历史上由任何卫星拍摄到的每张图像都将联网上传至AWS。
一文看懂真实的英国大数据产业以及创业图谱
前不久刚刚落幕的贵阳大数据博览会上，英国国际贸易部携20家英国大数据领域内的优秀企业和学术研究机构来华，并在“2017中英大数据合作交流·英国日”期间，分享了英国在大数据行业的创新和独特之处。

技术

2017年Apache Spark两大发展方向：深度学习和提升实时流性

微信关注我们

原文链接：https://yq.aliyun.com/articles/107406

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

[Spark]Shark, Spark SQL, Hive on Spark以及SQL On Spark的未来

随着Spark SQ的引入以及Hive On Apache Spark的新功能（HIVE-7292）的引入，我们对这两个项目的立场以及它们与Shark的关系有了很多的关注。在今天的Spark Summit上，我们宣布我们正在停止Shark的开发，并将资源全部集中在Spark SQL上，这将为现有Shark用户提供一个Shark特色的圈子(will provide a superset of Shark’s features for existing Shark users to move forward)。特别是，Spark SQL将提供从Shark 0.9服务器进行无缝升级途径，以及与Spark程序集成的新功能。 1. Shark 3年前Shark项目开始时，Hive（MapReduce）是Hadoop上SQL的唯一选择。Hive将SQL编译成可扩展的MapReduce作业，并可以使用各种格式（通过其SerDes）。但是，它的性能不如理想。为了交互式查询，组织部署了昂贵的专有企业数据仓库（EDW），这些仓库需要严格且冗长的ETL管道( organizations deployed ...

570

《大数据算法》一1.2　大数据算法

本节书摘来华章计算机《大数据算法》一书中的第1章，第1.2节，王宏志　编著, 更多章节内容可以访问云栖社区“华章计算机”公众号查看。 1.2　大数据算法这一节我们概述大数据算法。 1.2.1　大数据上求解问题的过程首先我们看一看在大数据上问题求解的过程。我们面对的是一个计算问题，也就是说我们要用计算机来处理一个问题。拿到一个计算问题之后，首先需要判定这个问题是否可以用计算机进行计算，如果学习过可计算性理论，就可以了解有许多问题计算机是无法计算的，比如判断一个程序是否有死循环，或者是否存在能够杀所有病毒的软件，这些问题都是计算机解决不了的。从“可计算”的角度来看，大数据上的判定问题和普通的判定问题是一样的，也就是说，如果还是用我们今天的电子计算机模型，即图灵机模型，在小数据上不可计算的问题，在大数据上肯定也不可计算。计算模型的计算能力

610

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario，低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。