Apache NiFi 1.13.1 发布,数据处理与分发系统
Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。
自 1.13.0 版本以来的变化:
- 修正了 PutDatabaseRecord 回归问题
- MySQL CDC 现在支持 TLS
- 对于某些小的流文件和合并方案,性能有显著提高
- 支持 UTF-8 字符的 FTP 处理器
- 系统级指标(GC、repo 大小、负载均衡)的状态历史记录现在可以保留了
- 现在支持 ListenFTP 处理器,允许 NiFi 本身作为 FTP 服务器
- 现在能够根据传入数据的模式演变自动改变 Hive 表结构
- 组件级别的属性(如处理器的属性)现在有了一个依赖结构,这样用户就可以根据需要设置其他相关的属性
- Zookeeper 的交互现在可以用 TLS 保护
- 对与微软 Azure 协议和系统的互动进行了大量改进
- 改进 Google Cloud 和 AWS 网络服务的集成
- 改进 AMQP 和 MQTT 的整合工作
- 几项改进使得更好的变更数据捕获和稳定的高速摄取到 Apache Kudu
更多详情可查看:https://cwiki.apache.org/confluence/display/NIFI/Release+Notes#ReleaseNotes-Version1.13.1