《Storm实时数据处理》一1.10　将产品部署到集群-低调大师

《Storm实时数据处理》一1.10　将产品部署到集群

2017-07-02 686

本节书摘来华章计算机《Storm实时数据处理》一书中的第1章，第1.10节，（澳）Quinton Anderson　著卢誉声　译更多章节内容可以访问云栖社区“华章计算机”公众号查看。

1.10　将产品部署到集群

在完成整个开发过程之前，我们需要对集群中的Topology进行功能性测试，然后再将其部署到下个环境中。

1.10.1　实战

Step01　首先需要在主机开发环境中配置Storm客户端，在用户主目录下创建.storm目录。然后在这个目录下新建storm.yaml，内容如下：

Step02　在项目根目录下，使用以下命令打包Topology：

Step03　这样就会在项目的目标目录下生成一个完整并打包好的JAR文件。这时就可以用storm客户端命令将JAR包部署到集群上：

1.10.2　解析

Storm命令行客户端为你提供了所有控制集

微信关注我们

原文链接：https://yq.aliyun.com/articles/118951

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

从Greenplum、Hadoop到现在的阿里大数据技术

在2016云栖大会·武汉峰会上，阿里云技术专家宋杰分享了他对云计算的三条路径的理解和感悟，并且阐述了云计算对于企业而言到底意味着什么的问题。那么阿里大数据发展之路经历了哪三次技术突围?阿里又是如何通过十余年的技术沉淀最终铸就飞天系统的呢?本文将为你揭晓答案，精彩不容错过。对于企业来说，但是到底云计算是什么呢?相信很多企业都有这样的困惑，让我们一起回到这个原始的起点探讨究竟什么是云计算?云计算对于企业而言到底意味什么? 云计算的三条发展路径及三种落地形态当回到最初的起点再审视云计算的发展路径，可以发现，经过十余年的发展演进，云计算有三条发展路径，并且最终沉淀下来了三种落地形态。第一条路：源自于谷歌对大规模数据的处理，谷歌为全球的互联网用户提供同一个服务——搜索，它需要将全世界所有的网站的数据都爬回去，然后做排序和索引，之后再为用户提供搜索服务。可以看到这样的工作需要对海量数据进行处理，谷歌需要把上百万台的服务器整合起来去做排序，索引和查询。第二条路：淘宝则发展出来云计算的另一条路径，这条路与谷歌的相比有类似之处，同样需要把很多数据整合起来做一件事情。在我看来，淘宝所做的事情比谷歌...

2017-07-02

607

本节书摘来自华章计算机《Storm企业级应用：实战、运维和调优》一书中的第3章，第3.5节,作者：马延辉陈书美雷葆华著，更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.5　Stream消息流和Stream Grouping消息流组 Storm核心的抽象概念是“流”。流是一个分布式并行创建和处理的无界的连续元组（Tuple）。流通过给流元组中字段命名来定义。在默认情况下，元组可以包含整型、长整型、短整型、字节、字符串、双精度浮点数、单精度浮点数、布尔型和字节数组。3.5.1　Stream消息流消息流是Storm中最关键的抽象，是一个没有边界的Tuple序列，这些Tuple以分布式的方式并行地创建和处理。定义消息流主要是定义消息流中的Tuple。Tuple的定义在3.1节已经做了详细介绍，本章节不再累述。消息流Tuple

2017-07-02

641

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。