Yahoo! s4和Twitter storm的粗略比较-低调大师

Yahoo! s4和Twitter storm的粗略比较

2017-05-01 679

ItemsProjects	Yahoo! s4	Twitter Storm
协议	Apache license 2.0	Eclipse Public License 1.0
开发语言	Java	Clojure,Java,Clojure编写了核心代码
结构	去中心化的对等结构	有中心节点nimbus，但非关键
通信	可插拔的通讯层，目前是基于UDP的实现	基于facebook开源的thrift框架
事件/Stream	<K,A>序列，用户可自定义事件类	提供Tuple类，用户不可自定义事件类，但是可以命名field和注册序列化器
处理单元	Processing Elements，内置PE处理 count,join和aggregate等常见任务	Bolt，没有内置任务，提供IBasicBolt处理自动ack
第三方交互	提供API,Client Adapter/Driver，第三方客户端输入或者输出事件	定义Spout用于产生Stream，没有标准输出API
持久化	提供Persist API规范，可根据频率或者次数做持久化	无特定API，用户可自行选择处理
可靠处理	无，可能会丢失事件	提供对事件处理的可靠保证（可选）
路由	EventType + Keyed attribute + value匹配内置count,join和aggregate标准任务	Stream Groupings: Shuffle,Fields,All,Global,None,Direct 非常灵活的路由方式
多语言支持	暂时只支持Java	多语言支持良好，本身支持Java,Clojure，其他非JVM语言通过thrift和进程间通讯
Failover	部分支持，数据无法failover	部分支持，数据同样无法failover
Load Balance	不支持	不支持
并行处理	取决于节点数目，不可调节	可配置worker和task数目，storm会尽量将worker和task均匀分布
动态增删节点	不支持	支持
动态部署	不支持	支持
web管理	不支持	支持
代码成熟度	半成品	成熟
活跃度	低	活跃
编程	编程 + XML配置	纯编程
参考文档	http://docs.s4.io/	https://github.com/nathanmarz/storm/wiki/ http://xumingming.sinaapp.com/category/storm/ （非常好的中文翻译)

本文来源于"阿里中间件团队播客",原文发表时间" 2011-11-09"

微信关注我们

原文链接：https://yq.aliyun.com/articles/85293

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

《MapReduce 2.0源码分析与编程实战》一1.5　看，大象也会跳舞

本节书摘来异步社区《MapReduce 2.0源码分析与编程实战》一书中的第1章，第1.5节，作者：王晓华责编：陈冀康，更多章节内容可以访问云栖社区“异步社区”公众号查看。 1.5　看，大象也会跳舞大象也会跳舞。当人们还在争论大数据处理能否为自己所在的行业带来革命的时候，部分行业领袖已经在享用大数据处理给自己带来的非凡好处。 Hadoop一个最为普遍的应用是为获得的海量数据提供处理程序，从而能够获得其中包含的各种信息。例如经常使用的聚类推荐，向感兴趣的顾客推荐相关商品和服务；或者为广告供应商提供具有针对性的广告服务，并且通过点击率的反馈获得统计信息，进而有效地帮助他们调整相应的广告投放能力。长期以来，互联网巨头，包括Yahoo！、Google等广告商为其投放的标准广告类型提供了多种广告计费方式。首先是基于点击数计费的广告形式，即根据查看和点击这个广告的人群数目付费的广告投效方式。此外，还有根据网上查看到广告的人数比例进行付费的模式，此项广告投放简单，但是针对性较差，无差别的投放并不能带来好的收益和效果。随着技术的进步，更多的动态广告内容被广泛应用到广告投放形式中来，即根据个人...

2017-05-01

705

本节书摘来异步社区《MapReduce 2.0源码分析与编程实战》一书中的第1章，第1.6节，作者：王晓华责编：陈冀康，更多章节内容可以访问云栖社区“异步社区”公众号查看。 1.6 本章小结大象也会跳舞，我们曾幻想臃肿的数据不再成为我们的负担。Hadoop带来的一切使得我们梦想成真。大数据已经成为我们所拥有的财富，成为一座未经开采的金矿。我们还有什么理由不去使用和掌握它呢？

2017-05-01

681

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。