StreamX v1.0.0 发布，Flink 开发脚手架、流批一体平台

2021-05-24 1045

Make Flink|Spark easier!!!

大数据技术如今发展的如火如荼,已呈现百花齐放欣欣向荣的景象,实时处理流域 Apache Spark 和 Apache Flink 更是一个伟大的进步,尤其是Apache Flink被普遍认为是下一代大数据流计算引擎, 我们在使用 Flink 时发现从编程模型, 启动配置到运维管理都有很多可以抽象共用的地方, 我们将一些好的经验固化下来并结合业内的最佳实践, 通过不断努力终于诞生了今天的框架 —— StreamX, 项目的初衷是 —— 让 Flink 开发更简单, 使用StreamX开发,可以极大降低学习成本和开发门槛, 让开发者只用关心最核心的业务,StreamX 规范了项目的配置,鼓励函数式编程,定义了最佳的编程方式,提供了一系列开箱即用的Connectors,标准化了配置、开发、测试、部署、监控、运维的整个过程, 提供scala和java两套api, 其最终目的是打造一个一站式大数据平台,流批一体的解决方案

重要特性

开发脚手架
多版本Flink支持(多版本无缝支持1.11.x,1.12.x,1.13.x)
一系列开箱即用的connectors
支持项目编译功能(maven 编译)
在线参数配置
支持 `Applicaion` 模式， `Yarn-Per-Job` 模式启动
快捷的日常操作(任务`启动`、`停止`、`savepoint`，从`savepoint`恢复)
支持火焰图
支持 `notebook` (在线任务开发)
项目配置和依赖版本化管理
在线管理依赖(maven pom)和自定义jar
Flink SQL WebIDE
支持 Catalog、Hive
任务失败告警和重试重

软件架构

项目地址

官网：http://www.streamxhub.com

Github: streamxhub/streamx: Make Flink|Spark easier!!! (github.com)

Gitee: benjobs/StreamX (gitee.com)

快速上手

快速上手开发 | StreamX (streamxhub.com)

平台快速使用 | StreamX (streamxhub.com)

StreamX 遵循 Apache-2.0 开源协议,将会是个长期更新的活跃项目,欢迎大家提交 PR 或 Issue。喜欢可以给个 Star。现已正式发布1.0.0,经历无数汗水,现终于得见天日. 现在她如初生婴儿一般满怀无限憧憬的出现在世人面前,眼下还是一团薪薪之火,期待大家的热情让她烈焰燎原起来.请多多关照,多多支持!

微信关注我们

原文链接：https://www.oschina.net/news/142862/streamx-1-0-0-released

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

smart-doc 2.1.8 发布，Java 零注解 API 文档生成工具

smart-doc 是一款同时支持 java restful api 和 Apache Dubbo rpc 接口文档生成的工具，smart-doc 颠覆了传统类似 swagger 这种大量采用注解侵入来生成文档的实现方法。 smart-doc 完全基于接口源码分析来生成接口文档，完全做到零注解侵入，你只需要按照 java 标准注释编写，smart-doc 就能帮你生成一个简易明了的 markdown 或是一个像 GitBook 样式的静态 html 文档。如果你已经厌倦了 swagger 等文档工具的无数注解和强侵入污染，那请拥抱 smart-doc 吧！功能特性支持接口 debug。零注解、零学习成本、只需要写标准 java 注释。基于源代码接口定义自动推导，强大的返回结构推导。支持 Spring MVC,Spring Boot,Spring Boot Web Flux(controller 书写方式)。支持 Callable,Future,CompletableFuture 等异步接口返回的推导。支持 JavaBean 上的 JSR303 参数校验规范，支持分组验证。...

2021-05-24

650

JAP 1.0.2 正式发布概要 jap-ids1.0.2 支持多租户场景、支持动态issuer、支持前后端分离的业务场景； jap-social对外提供refreshToken、revokeToken和getUserInfo方法；新增Pipeline模式，支持自定义部分业务场景的流程，同时引入SPI机制；基于 Github Action，JAP 正式启用快照版，比如：1.0.2-SNAPSHOT。（快照版实时更新，但不可用于生产环境）使用jap-bom管理项目版本依赖，使用flatten-maven-plugin简化 pom 版本 JustAuth 和 JAP 项目已经加入 “开源软件供应链点亮计划 - 暑期2021”，欢迎各位在校学生踊跃参与！ JAP 1.0.2 版本更新内容本次更新涉及到字段、方法返回类型的修改，请升级的时候注意。可以参照本文下方的更新说明进行修改、调整。新功能/特性 jap-ids模块在IdsConfig中添加enableDynamicIssuer属性，boolean类型。当enableDynamicIssuer=true时，开发者不再需要单独设...

2021-05-24

682

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。