Apache Beam 2.19.0 发布,大数据批处理和流处理标准
Apache Beam 2.19.0 发布了。 Apache Beam 是 Google 在 2016 年 2 月份贡献给 Apache 基金会的项目,主要目标是统一批处理和流处理的编程范式,为无限、乱序、web-scale 的数据集处理提供简单灵活,功能丰富以及表达能力十分强大的 SDK。Apache Beam 项目重点在于数据处理的编程范式和接口定义,并不涉及具体执行引擎的实现,Apache Beam 希望基于 Beam 开发的数据处理程序可以执行在任意的分布式计算引擎上。
主要更新内容:
New Features / Improvements
- BEAM-6008 改进 Java/Python PortableRunner 中的错误报告
- BEAM-8296 容器化 Spark 作业服务器
- BEAM-8746 允许本地作业服务从 docker 内部工作
- BEAM-8837 PCollectionVisualizationTest :可能的错误
- BEAM-8139 执行便携式 Spark 应用程序 jar
- BEAM-9019 改进 Spark 编码器(包装器或光束编码器)
- BEAM-9053 改进无法获取 Python SDK 中指定路径的正确文件系统时的错误消息
- BEAM-9055 跨语言统一 Fn Data API 的配置名称
更新说明: https://beam.apache.org/blog/2020/02/04/beam-2.19.0.html
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
Apache NiFi 1.11.1 发布,数据处理和分发系统
Apache NiFi 1.11.1 发布了,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 更新亮点: 修复了导致背压(backpressure)在群集配置中无法正常工作的回归问题 修复了导致重启后不强制执行队列优先级的问题 清理错误时改进了 PutHDFS 的错误处理,以确保重试 更新说明: https://cwiki.apache.org/confluence/display/NIFI/Release+Notes#ReleaseNotes-Version1.11.1
- 下一篇
gRPC 1.27.0 发布,谷歌开源的高性能 RPC 框架
gRPC 1.27.0 发布了。gRPC 是 Google 开源的高性能、通用 RPC 框架,面向移动和 HTTP/2 设计,是由谷歌发布的首款基于 Protocol Buffers 的 RPC 框架。gRPC 基于 HTTP/2 标准设计,带来诸如双向流、流控、头部压缩、单 TCP 连接上的多复用请求等特性。这些特性使得其在移动设备上表现更好,更省电且节省空间占用。 主要更新内容如下: Core 在 Windows 上使用 OpenSSL1.1.1+ 修复构建(#21611) 添加一个新的子模块 libuv v1.34.0(#21583) grpclb:添加了对平衡器的支持,告诉客户端进入后备模式(#21452) 允许在 Android 上默认使用系统根证书(#21395) 更新说明:https://github.com/grpc/grpc/releases/tag/v1.27.0
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- MySQL8.0.19开启GTID主从同步CentOS8
- Hadoop3单机部署,实现最简伪集群
- CentOS8编译安装MySQL8.0.19
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- Eclipse初始化配置,告别卡顿、闪退、编译时间过长
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池