IBM、WanDisco、DataTorrent与其它合作伙伴共同共同签订互操作性协议-低调大师

IBM、WanDisco、DataTorrent与其它合作伙伴共同共同签订互操作性协议

2017-07-02 451

作为用于对Apache Hadoop应用程序加以标准规范的行业倡议，目前已经有一大批重量级企业供应商承诺加入其互操作性体系当中。

开放数据平台倡议(简称ODPi)日前宣布，DataTorrent、IBM、Pivotal、SAS、Syncsort、WanDisco以及Xavient已经正式承诺只提供能够实现彼此互操作性的应用与平台。

ODPi吸引到一大批重量级厂商加盟

ODPi于今年5月公布了其第一套运行时规范，旨在建立互操作性目标的技术性基础。

尽管该项倡议受到了来自Hortonworks的热情支持，但其它两大Hadoop企业MapR与Cloudera则都对其持怀疑态度。

Hadoop缔造者兼Cloudera公司成员Doug Cutting在接受采访时表示，他觉得ODPi倡议并不值得称道。ODPi“实际并不属于开源社区的组成部分; 事实上，它是独立于之外的基金会组织，”Cutting指出。

在此次公告之前的采访当中，ODPi的John Mertic表示，无论倡议刚刚发布起出现哪些问题，该组织都会通过治理与发展方向的调整将其转化为可能，从而逐步改变Cloudera与MapR拒绝参与的态度。

截至今天，已经有十余款ODPi互操作应用程序完成了测试，且能够成功运行在多套运行时兼容平台之上。另外，目前Altiscale、ArenaData、Hortonworks、IBM以及Infosys Apache Hadoop平台皆可相互兼容。

另外，ODPi还于今天公布，其运行时规范的2.0版本将添加对Apache Hive及Hadoop兼容文件系统的支持能力。

在规范版本1.0中包含Yarn、MapReduce与HDFS的情况下，ODPi希望能够在2.0版本内纳入Hive——用于经由分布式存储实现大规模数据集的读取、写入与管理——从而减少SQL查询在各类Hadoop平台之上的不一致性。

IBM公司产品管理、数据与分析副总裁Ritika Gunnar表示：“ODPi提供了一套用于开发大数据应用的通用型平台，从而实现不同发行版与应用方案之间的互操作能力。末着这种精神，IBM公司将确保我们旗下的大部分Apache Hadoop相关产品具备这种互操作性，其中包括IBM Big SQL、IBM SPSS分析服务器以及IBM Big Replicate等等。”

“通过支持互操作应用程序，ODPi标准将帮助客户从起步阶段即实现可观收益，”Gunnar补充称。

本文转自d1net（转载）

微信关注我们

原文链接：https://yq.aliyun.com/articles/156550

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Spark 0.8 集群(CentOS6.4)-简单统计测试

　环境:CentOS 6.4, hadoop-2.0.0-cdh4.2.0, JDK 1.6, spark-0.8.0-incubating-bin-cdh4.tar.gz,Scala 2.9.3 1. 安装、部署集群环境参考前章《安装Spark 0.8集群(CentOS6.4) - 大数据之内存计算》　　2.测试描述使用在线测试数据生工具，动态生成如下json数据(名称DATA[1-9].json)： {"id":10,"first_name":"Ralph","last_name":"Kennedy","country":"Colombia","ip_address":"12.211.41.162","email":"rkennedy@oyonder.net"}, {"id":11,"first_name":"Gary","last_name":"Cole","country":"Nepal","ip_address":"242.67.150.18","email":"gcole@browsebug.info"}, … 可以数据可以先生成100M左右，然后通过linux ...

2017-07-03

518

数据已经成为现代化企业中最为重要的宝贵资源。一切决策、策略或者方法都需要依托于对数据的分析方可实现。随着“大数据分析”逐步替代其上代版本，即“商务智能”，企业正面临着一个更加复杂、且商业情报规模更为庞大的新时代。考虑到现有技术解决方案的复杂性与多样化，企业往往很难找到适合自己的大数据收集与分析工具。然而，混乱的时局之下已经有多种方案脱颖而出，证明其能够帮助大家切实完成大数据分析类工作。下面我们将整理出一份包含十款工具的清单，从而有效压缩选择范畴。 1. OpenRefine 这是一款高人气数据分析工具，适用于各类与分析相关的任务。这意味着即使大家拥有多川不同数据类型及名称，这款工具亦能够利用其强大的聚类算法完成条目分组。在聚类完成后，分析即可开始。 2. Hadoop 大数据与Hadoop可谓密不可分。这套软件库兼框架能够利用简单的编程模型将大规模数据集分发于计算机集群当中。其尤为擅长处理大规模数据并使其可用于本地设备当中。作为Hadoop的开发方，Apache亦在不断强化这款工具以提升其实际效果。 3. Storm 同样来自Apache的Storm是另一款伟大的实时计算系统，能够极...

2017-07-03

505

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。