产品动态 | StreamNative 宣布开源 AWS SQS Connector

2021-03-17 609

今天，我们很自豪地宣布 StreamNative 发布并开源首版 AWS Simple Queue Service (SQS) connector^[1]！通过 SQS connector，你能轻松地在 Pulsar 与 SQS 之间移动数据，并充分利用这两种消息系统的优势。这标志着 StreamNative 在提升 Pulsar 生态系统的多样性、完整性和生产力方面又向前跨越了一大步。

SQS connector 是什么？

众所周知，检验消息系统的重要指标之一是与周边生态的集成状况。与其它 Pulsar connector^[2] 一样，SQS connector 是构建 Apache Pulsar 周边生态的重要组成部分。SQS connector 能够帮助你快速高效地在 Pulsar 和 SQS 之间移动数据，具有以下两类 connector：

•SQS source connector – 将 SQS 的数据导入至 Pulsar。

•SQS sink connector – 将 Pulsar 的数据导出至 SQS。

为什么开发 SQS connector？

在当今云原生时代，Apache Pulsar 与 AWS SQS^[3] 是构建分布式架构的重要组件和基础软件。

Pulsar 是下一代云原生分布式消息系统，具备强扩展性、高一致性和高弹性，有着非常广阔的应用前景。近年来，Pulsar 发展势如破竹，全球用户基数迅速增长，催生了更多集成流数据管道与事件驱动应用程序的需求。

SQS 是 Amazon 完全托管的消息队列服务，适用于分离和扩展微服务、分布式系统和无服务器应用程序，并支持动态弹性扩展。因为其操作简单、上手快速等特点，颇受用户青睐。

Pulsar 和 SQS 都拥有广泛的用户群体和强劲的开发支持，越来越多的用户都在使用这两种消息系统。同时，我们也收到了用户的需求，希望能在 Pulsar 与 SQS 之间移动数据，并充分利用这两种消息系统的优势。

SQS connector 有哪些优势？

为了使 Pulsar 与 SQS 拥有稳定的流式集成，SQS connector 具备诸多优势，包括但不限于：

•易上手。无需编写任何代码，只需进行一些简单配置，便可通过 SQS connector 在 Pulsar 和 SQS 之间移动数据。简化的数据导入和导出过程能大幅提升企业的数据使用效率。•易扩展。根据不同的业务需求，可以选择在单机或集群上运行 SQS connector，助力企业构建实时数据管道。•可持续。SQS connector 简单的安装和部署过程，使企业能更专注和更高效地探索数据的商业价值。

如何参与？

此次，我们发布了 SQS connector 2.7.0，并构建了丰富的周边资源和活跃的开发社区。你可以通过以下任一方式参与该项目：

•想上手试试？
如需下载 SQS connector 2.7.0 和查阅用户指南（帮助你快速上手使用），点击这里查看^[4]。•想解决问题？
如有任何问题，你都可以在 SQS connector GitHub repo 中创建 issue^[5]、或发送至 Pulsar mailing list^[6]、或在 Twitter^[7] 上留言、或加入 Pulsar Slack^[8] 的 #connector-sqs 频道或加入 Pulsar 微信群进行讨论。无论哪种方式，Pulsar 资深专家都随时 standby。•想参与贡献？
SQS connector 源码开放并托管在 GitHub 上。如需改进功能或修复 bug，欢迎提交 PR。

StreamNative 一直致力于为 Pulsar 构建丰富和完善的生态系统。与其它 Pulsar 集成和插件一样，SQS connector 也是 StreamNative Hub^[9] 的重要组成部分。作为 Pulsar 的“活水源”，StreamNative 孜孜不倦多筑渠，引得潺潺活水来，竭尽全力为用户赋能，为企业增效，共同努力破局下一个云时代。

关于 StreamNative

StreamNative 是一家开源基础软件公司，由 Apache 软件基金会顶级项目 Apache Pulsar 创始团队组建而成，围绕 Pulsar 打造下一代云原生批流融合数据平台。StreamNative 作为 Apache Pulsar 商业化公司，专注于开源生态和社区构建，致力于前沿技术领域的创新，创始团队成员曾就职于 Yahoo、Twitter、EMC 等知名大公司。

引用链接

[1] AWS Simple Queue Service (SQS) connector: https://github.com/streamnative/pulsar-io-sqs
[2] Pulsar connector: http://pulsar.apache.org/docs/en/io-overview/
[3] AWS SQS: https://aws.amazon.com/sqs/
[4] SQS connector 文档: https://github.com/streamnative/pulsar-io-sqs/blob/master/README.md
[5] 反馈 SQS connector 问题: https://github.com/streamnative/pulsar-io-sqs/issues/new/choose
[6] Pulsar mailing list: https://lists.apache.org/list.html?dev@pulsar.apache.org
[7] StreamNative Twitter: https://twitter.com/streamnativeio
[8] Pulsar Slack #connector-sqs 频道: https://apache-pulsar.slack.com/archives/C01NG4T1BU6
[9] StreamNative Hub: https://streamnative.io/en/blog/tech/2020-05-26-intro-to-hub

点击“阅读原文”，立即试用 AWS SQS Connector！

本文分享自微信公众号 - StreamNative（StreamNative）。
如有侵权，请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”，欢迎正在阅读的你也加入，一起分享。

微信关注我们

原文链接：https://my.oschina.net/apachepulsar/blog/4991903

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

一个合格的CloudNative应用：程序当开源软件编写，应用配置外置

摘要：对于一个合格的CloudNative应用，应该把自己的程序当做开源软件来编写的，不该将数据库连接信息和密码放在代码里，一定要将配置外置。本文分享自华为云社区《[CloudNative] 企业应用上云实践手记-Cloud Native Phase 3 - 云原生应用AutoConfig》，作者：关耳山石对于一个合格的CloudNative应用，应该把自己的程序当做开源软件来编写的，不该将数据库连接信息和密码放在代码里，一定要将配置外置。因此我试着在华为云上落地这套标准，期间尝试了从ServiceStage、CCE、CSE这三个入口进行配置注入，最终实现能够在应用启动时，主动拉取配置，覆盖本地配置文件里的调试配置，并能够在线配置并生效。打法是：CCE配置启动参数，制定SpringProfiles；配合CSE做应用配置，将资源外置后的配置记录于此，并可以动态更新，最终实现了配置外置的诉求。另外，通过这次增加的多版本管理，尝试梳理了一下ServiceStage的组件、CCE的workload、CSE的应用和微服务之间，错综复杂的概念之间的关系，个人浅见，欢迎指正： 1. 初始化...

2021-03-19

646

前端性能优化总结： 1.减少 HTTP 请求数前端开发80%以上的响应时间浪费在图片、样式、脚本等资源上传下载上，然而大多资源是必不可少的，我们减少 HTTP 请求数从以下方面进行： ①合并文件（JS/CSS文件/图片）合并图片，当图片较多时，通过合并为一张大图，不仅能减少http请求数，还能利用缓存来提升性能。合并CSS、JS文件，例如3个css文件可能会发出3此请求，用户等待时间较长，合并之后只需要发出一次请求，节省请求时间，加快页面的加载，用户体验感上升。 ②行内图片（Base64 编码）用 data: URL模式来把图片嵌入页面，会增加HTML文件的大小，通过编码的字符串将图片内嵌到网页文本中，会有效减少页面的大小。 ③缓存策略友好充分利用缓存，通过在请求头设置缓存属性，下次再次访问可以直接从本地获取资源，减少了不必要的数据传输，节省带宽、减少服务器的负担，提升网站性能、加快了客户端加载网页的速度。Expires 设置了一个时间，只要在这个时间之前，浏览器都不会请求文件，而是直接使用缓存。cache-control设置过期时间长度（秒），在这个时间范围内，浏览器就会直...

2021-03-19

539

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。