官宣!Taier 1.3 新版本正式发布,新鲜功能抢先体验
2022 年 11 月 7 日,Taier1.3 版本正式发布!
Taier 是一个大数据分布式可视化的 DAG 任务调度系统,旨在降低 ETL 开发成本、提高大数据平台稳定性,大数据开发人员可以在 Taier 直接进行业务逻辑的开发,而不用关心任务错综复杂的依赖关系与底层的大数据平台的架构实现,将工作的重心更多地聚焦在业务之中。
Taier 自今年 2 月份开源之后,得到了社区开发者的广泛支持,我们积极吸收社区开发者的意见建议,不断迭代版本,目前已发布了 Taier1.1、Taier1.2 这两个大的版本更新。
本次发布的 Taier1.3 版本,我们新增了 Flink Standalone 组件,融合了 DataSourceX 的模块,并新增了 Python、Shell、ClickHouse、Doris SQL 等多种任务,任务数据源绑定,任务支持指定队列运行,并进行了部署优化,同时对官网社区的 UI 进行了全新的升级改造。
目前新版本已在 Github 与 Gitee 上线,同时使用文档也在社区推送,大家可以随时下载查阅,欢迎大家前往体验(喜欢我们的项目欢迎大家点个 Star),体验地址:
Github:
https://github.com/DTStack/Taier
Gitee:
https://gitee.com/dtstack_dev_0/taier
社区官网:
https://dtstack.github.io/Taier/
Taier1.3 版本详解
01 新增 Flink Standalone
新增 Flink Standalone 组件,可以通过 Flink Standalone 使用 Flink SQL、数据同步、实时采集等任务相关功能。移除 Taier 对 Hadoop 组件的强依赖,支持轻量化的数据处理。
02 DataSourceX 融合
Taier 融合 DataSourceX 模块,移除 Taier 外部插件依赖。新增数据源插件相关特性,支持后续 Taier 对接更多的 RDBMS 类型的 SQL 任务。
03 新增 Python、Shell 任务
新增 Script 组件,支持 Python、Shell 任务类型,可以在 Taier 上通过脚本类型任务进行操作。
04 新增 ClickHouse、Doris SQL 任务
新增 ClickHouse、Doris SQL 任务类型,支持数据同步脚本模式到 ClickHouse、Doris,再进行任务调度处理。
05 任务数据源绑定
控制台组件移除 SQL 类型组件配置,SQL 任务直接和数据源互相绑定,支持任务和数据源一对一的执行,将 SQL 执行域细分到具体的单个数据源。
06 任务支持指定队列运行
Hadoop 类型任务支持指定队列运行,队列资源隔离细分到任务级别。
07 部署优化
Taier 优化单机部署,优化前后端部署操作,简化 docker 镜像部署流程,降低上手难度。
08 官网升级
Taier 社区新官网上线,UI 设计全面升级。
后续版本规划
Taier 今年更新了 3 个大的版本,按照社区规划,后续版本我们计划重点围绕关键点:
● 完善 Taier Datasource 模板支持 SQL 任务
● HadoopMR、Spark Jar、PySpark 任务支持
● 任务告警
● Windows 开发环境适配
我们欢迎社区的开发者们一起参与到 Taier 的版本建设中来,同时大家如果有其他的意见建议也可以给我们提一个 Issue 或者 PR,大家可以来一起探讨怎么更好的共建项目。感兴趣的小伙伴们可以加入我们的技术交流社群,一起交流 Taier 的技术问题及难点,共建 Taier!
开源项目库地址:https://github.com/DTStack/Taier

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
无鱼项目工时软件 0.1 版本发布,提供了新的部署方式
无鱼项目工时系统,是一款开源的轻量级项目工时管理系统,是业进行项工时管理统计的推荐选择。 0.1版本更新说明 1、优化了初始化sql文件 2、优化了控制脚本的 3、修改了前后端调用接口的方式,不在需要重新编译前端代码。 4、现通过一个接口对外提供访问。 安装方式如下:部署手册 程序下载: https://gitee.com/wy-soft/wyproject/releases/tag/wyproject_all-0.1 源码地址: https://gitee.com/wy-soft/wyproject 其他 项目开源免费,无特殊授权要求。
- 下一篇
Java 分布式游戏服务器,ioGame v17.1.22 action 调试工具
主要更新 #I5YM30 这是一个重磅更新 action调试工具,模拟客户端请求,大量减少开发者编写测试用工作量。 在介绍 ioGame action 调试工具之前,先简单说一下 ioGame 的文档生成; ioGame 的文档中提到过对接方面这一环节,日常中,我们编写完成业务需求后,就会与游戏前端的同学进行联调对接的环节。在对接前需要提供相应的对接文档,如:如何访问该需求的业务方法、访问该业务方法需要什么参数、会得的响应是什么、对于该业务方法的描述等等。 对于这方面 ioGame 也提供了一些辅助 游戏文档生成,通过该辅助可以做到代码即文档,就是说当你的业务编写完成后,不需要额外的编写业务对接文档了,框架会自动的生成最新的文档。 如果没有游戏文档生成,那么你将要抽出一些时间来维护文档的工作,而且当团队人数多了,就会很乱(文档不同步、不是最新的、或是忘记更新等等情况就会出现)。 现在我们知道了在对接方面,ioGame 提供了对接文档的自动生成,文档可以确保服务器提供的 action 所需要的信息,但不能确保 action 功能的正确性; action调试工具使用场景举例: 试想...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS关闭SELinux安全模块
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- Linux系统CentOS6、CentOS7手动修改IP地址
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- SpringBoot2整合Redis,开启缓存,提高访问速度
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- MySQL8.0.19开启GTID主从同步CentOS8
- Mario游戏-低调大师作品