开源大数据流水线系统 PiFlow V1.3 发布-低调大师

开源大数据流水线系统 PiFlow V1.3 发布

2022-07-27 561

PiFlow 是一个基于分布式计算框架 Spark 开发的大数据流水线系统。该系统将数据的采集、清洗、计算、存储等各个环节封装成组件，以所见即所得方式进行流水线配置。简单易用，功能强大。本次版本更新如下特性：

数据源改版，支持组件绑定；
优化日志保存方式，避免出现日志丢失问题，支持按天保存；
web改成war包，取消对6002端口的使用；
新增组件：
1. TDengine组件
2. TiDB组件
3. OceanBase组件
4. openlookeng组件

GitHub 地址： https://github.com/cas-bigdatalab/piflow
Gitee 地址： https://gitee.com/opensci/piflow

微信关注我们

原文链接：https://www.oschina.net/news/204395

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

渠成平台 1.2 版本发布，支持应用备份、恢复、全局数据库

大家好，渠成平台 1.2 版本发布，新增全局共享数据库、服务备份与恢复、自动签发https证书等功能，为您更好地使用平台和应用、享受云原生应用的快捷与方便提供了更有力的支撑。平台主要新增功能如下：支持全局共享数据库在安装应用时可以指定应用安装所使用的数据库，平台默认已经内置了全局共享数据库，使用共享数据库可以节省集群资源；也可以根据需要选用独享数据库，选用独享数据库时应用安装后会有一个专属的数据库实例可以使用。支持便捷的服务备份与恢复，提高您抗灭、抗风险的能力。新增服务资源使用数据的图形化展示，让您对服务的资源占用情况有更直观的了解。新增应用安装前对集群可用资源的检查，当前集群资源不足时会给提示信息，为您合理安排集群资源提供依据。新上架2款应用同步更新了应用市场的所有应用到最新版 V1.2 版详细更新列表一、新特性 Ingress版本升级到最新稳定版本。 K3s更新到最新稳定版。支持自定义域名。支持自定义haogs.cn二级子域名并支持签发https证书。新增app子命令管理应用。优化upgrade/manage子命令, 支持升级某单一组件。服务详情页增加资...

2022-07-27

425

CakePHP 是一个运用了诸如 ActiveRecord、Association Data Mapping、Front Controller 和 MVC（model–view–controller）等著名设计模式的开源 Web 框架。CakePHP 用 PHP 编写，以 Ruby on Rails 的概念为模型，并在 MIT 许可下进行分发。 CakePHP 4.4.3 已发布，这是 4.4 分支的维护版本，修复了几个社区报告的问题修复了文件断言方法中对 null 的潜在方法调用。改进了与 PHP 8.2 的兼容性。如果表配置了选项然后被模拟，TableLocator::get() 不再抛出错误。更新了 CI 配置以使用 Windows 2022 映像。修复了未正确设置 umask 的 Folder::create() 中的回归。与 FileEngine 一起使用的缓存键现在是 URL 编码的。这会将缓存键中的有效字符与其他引擎对齐。对于以前使用字母数字范围之外的字符的应用程序，它可能会导致缓存未命中。删除了多余的类类型检查。修复了 ResultSet 索引在启...

2022-07-28

515

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。