StreamX v1.0.0 发布，Flink 开发脚手架、流批一体平台

2021-05-24 1087

Make Flink|Spark easier!!!

大数据技术如今发展的如火如荼,已呈现百花齐放欣欣向荣的景象,实时处理流域 Apache Spark 和 Apache Flink 更是一个伟大的进步,尤其是Apache Flink被普遍认为是下一代大数据流计算引擎, 我们在使用 Flink 时发现从编程模型, 启动配置到运维管理都有很多可以抽象共用的地方, 我们将一些好的经验固化下来并结合业内的最佳实践, 通过不断努力终于诞生了今天的框架 —— StreamX, 项目的初衷是 —— 让 Flink 开发更简单, 使用StreamX开发,可以极大降低学习成本和开发门槛, 让开发者只用关心最核心的业务,StreamX 规范了项目的配置,鼓励函数式编程,定义了最佳的编程方式,提供了一系列开箱即用的Connectors,标准化了配置、开发、测试、部署、监控、运维的整个过程, 提供scala和java两套api, 其最终目的是打造一个一站式大数据平台,流批一体的解决方案

重要特性

开发脚手架
多版本Flink支持(多版本无缝支持1.11.x,1.12.x,1.13.x)
一系列开箱即用的connectors
支持项目编译功能(maven 编译)
在线参数配置
支持 `Applicaion` 模式， `Yarn-Per-Job` 模式启动
快捷的日常操作(任务`启动`、`停止`、`savepoint`，从`savepoint`恢复)
支持火焰图
支持 `notebook` (在线任务开发)
项目配置和依赖版本化管理
在线管理依赖(maven pom)和自定义jar
Flink SQL WebIDE
支持 Catalog、Hive
任务失败告警和重试重

软件架构

项目地址

官网：http://www.streamxhub.com

Github: streamxhub/streamx: Make Flink|Spark easier!!! (github.com)

Gitee: benjobs/StreamX (gitee.com)

快速上手

快速上手开发 | StreamX (streamxhub.com)

平台快速使用 | StreamX (streamxhub.com)

StreamX 遵循 Apache-2.0 开源协议,将会是个长期更新的活跃项目,欢迎大家提交 PR 或 Issue。喜欢可以给个 Star。现已正式发布1.0.0,经历无数汗水,现终于得见天日. 现在她如初生婴儿一般满怀无限憧憬的出现在世人面前,眼下还是一团薪薪之火,期待大家的热情让她烈焰燎原起来.请多多关照,多多支持!

微信关注我们

原文链接：https://www.oschina.net/news/142862/streamx-1-0-0-released

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

smart-doc 2.1.8 发布，Java 零注解 API 文档生成工具

smart-doc 是一款同时支持 java restful api 和 Apache Dubbo rpc 接口文档生成的工具，smart-doc 颠覆了传统类似 swagger 这种大量采用注解侵入来生成文档的实现方法。 smart-doc 完全基于接口源码分析来生成接口文档，完全做到零注解侵入，你只需要按照 java 标准注释编写，smart-doc 就能帮你生成一个简易明了的 markdown 或是一个像 GitBook 样式的静态 html 文档。如果你已经厌倦了 swagger 等文档工具的无数注解和强侵入污染，那请拥抱 smart-doc 吧！功能特性支持接口 debug。零注解、零学习成本、只需要写标准 java 注释。基于源代码接口定义自动推导，强大的返回结构推导。支持 Spring MVC,Spring Boot,Spring Boot Web Flux(controller 书写方式)。支持 Callable,Future,CompletableFuture 等异步接口返回的推导。支持 JavaBean 上的 JSR303 参数校验规范，支持分组验证。...

2021-05-24

703

JAP 1.0.2 正式发布概要 jap-ids1.0.2 支持多租户场景、支持动态issuer、支持前后端分离的业务场景； jap-social对外提供refreshToken、revokeToken和getUserInfo方法；新增Pipeline模式，支持自定义部分业务场景的流程，同时引入SPI机制；基于 Github Action，JAP 正式启用快照版，比如：1.0.2-SNAPSHOT。（快照版实时更新，但不可用于生产环境）使用jap-bom管理项目版本依赖，使用flatten-maven-plugin简化 pom 版本 JustAuth 和 JAP 项目已经加入 “开源软件供应链点亮计划 - 暑期2021”，欢迎各位在校学生踊跃参与！ JAP 1.0.2 版本更新内容本次更新涉及到字段、方法返回类型的修改，请升级的时候注意。可以参照本文下方的更新说明进行修改、调整。新功能/特性 jap-ids模块在IdsConfig中添加enableDynamicIssuer属性，boolean类型。当enableDynamicIssuer=true时，开发者不再需要单独设...

2021-05-24

726

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。