《Storm实时数据处理》一1.10　将产品部署到集群-低调大师

《Storm实时数据处理》一1.10　将产品部署到集群

2017-07-02 641

本节书摘来华章计算机《Storm实时数据处理》一书中的第1章，第1.10节，（澳）Quinton Anderson　著卢誉声　译更多章节内容可以访问云栖社区“华章计算机”公众号查看。

1.10　将产品部署到集群

在完成整个开发过程之前，我们需要对集群中的Topology进行功能性测试，然后再将其部署到下个环境中。

1.10.1　实战

Step01　首先需要在主机开发环境中配置Storm客户端，在用户主目录下创建.storm目录。然后在这个目录下新建storm.yaml，内容如下：

Step02　在项目根目录下，使用以下命令打包Topology：

Step03　这样就会在项目的目标目录下生成一个完整并打包好的JAR文件。这时就可以用storm客户端命令将JAR包部署到集群上：

1.10.2　解析

Storm命令行客户端为你提供了所有控制集

微信关注我们

原文链接：https://yq.aliyun.com/articles/118951

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

从Greenplum、Hadoop到现在的阿里大数据技术

在2016云栖大会·武汉峰会上，阿里云技术专家宋杰分享了他对云计算的三条路径的理解和感悟，并且阐述了云计算对于企业而言到底意味着什么的问题。那么阿里大数据发展之路经历了哪三次技术突围?阿里又是如何通过十余年的技术沉淀最终铸就飞天系统的呢?本文将为你揭晓答案，精彩不容错过。对于企业来说，但是到底云计算是什么呢?相信很多企业都有这样的困惑，让我们一起回到这个原始的起点探讨究竟什么是云计算?云计算对于企业而言到底意味什么? 云计算的三条发展路径及三种落地形态当回到最初的起点再审视云计算的发展路径，可以发现，经过十余年的发展演进，云计算有三条发展路径，并且最终沉淀下来了三种落地形态。第一条路：源自于谷歌对大规模数据的处理，谷歌为全球的互联网用户提供同一个服务——搜索，它需要将全世界所有的网站的数据都爬回去，然后做排序和索引，之后再为用户提供搜索服务。可以看到这样的工作需要对海量数据进行处理，谷歌需要把上百万台的服务器整合起来去做排序，索引和查询。第二条路：淘宝则发展出来云计算的另一条路径，这条路与谷歌的相比有类似之处，同样需要把很多数据整合起来做一件事情。在我看来，淘宝所做的事情比谷歌...

2017-07-03

572

本节书摘来自华章计算机《Storm企业级应用：实战、运维和调优》一书中的第3章，第3.5节,作者：马延辉陈书美雷葆华著，更多章节内容可以访问云栖社区“华章计算机”公众号查看。 3.5　Stream消息流和Stream Grouping消息流组 Storm核心的抽象概念是“流”。流是一个分布式并行创建和处理的无界的连续元组（Tuple）。流通过给流元组中字段命名来定义。在默认情况下，元组可以包含整型、长整型、短整型、字节、字符串、双精度浮点数、单精度浮点数、布尔型和字节数组。3.5.1　Stream消息流消息流是Storm中最关键的抽象，是一个没有边界的Tuple序列，这些Tuple以分布式的方式并行地创建和处理。定义消息流主要是定义消息流中的Tuple。Tuple的定义在3.1节已经做了详细介绍，本章节不再累述。消息流Tuple

2017-07-03

597

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。