Linkis 1.0.1 正式发版 - 大数据平台中间件解决方案-低调大师

Linkis 1.0.1 正式发版 - 大数据平台中间件解决方案

2021-07-28 550

Linkis 1.0.1对Linkis1.0.0版本发现Bug和影响性能，便利性的问题进行了修复和增强，欢迎更新升级。

Linkis 1.0.1

Linkis 1.0.1 作为1.0.0的修复版本，这次版本主要修复了高并发场景下的性能bug，以及优化资源管理模块,以及修复多个已发现的bug，并优化Spark引擎支持 FATE使用。

FATE (Federated AI Technology Enabler) 是微众银行AI部门发起的开源项目，为联邦学习生态系统提供了可靠的安全计算框架(https://github.com/FederatedAI/FATE)。

Abbreviations（关键字缩写）:
CGS: Computation Governance Services（计算治理服务）
PES: Public Enhancement Services（公共增强服务）
MGS: Microservice Governance Services（微服务治理服务）

增强

[Commons] Linkis-HTTPClient在上传文件时支持设置ContentType.
[Commons] Linkis-HttpClient支持兼容Response的content为空.
[Commons] HDFS FileSystem对象支持进行缓存.
[Commons] 优化Shoutdown兼容windows操作系统.
[Orchestrator] ioClient支持隔离单独的Orchestrator.
[PES-JobHistory] JobHistory支持记录用户提交任务的原始代码.
[PES-InstanceLabel] InstanceLabel模块支持增加和移除标签信息.
[PES-ErrorCode] 优化错误码模块的初始化sql，移除id字段的默认值.
[PES-Configuration] 管理台的配置支持修改实时刷新缓存值.
[PES-Configuration] 管理台支持内存设置单位，默认单位是GB.
[CGS-Entrance] 优化支持任务提交记录客户端IP信息，以方便链路分析.
[CGS-LimkisMnagager ] ECM的租户标签应该不被移除的，方便重启时保留租户标签信息.
[EnginePlugin-Spark] Spark EngineConn的启动参数支持设置原生参数去支持Fate使用，例如设置python版本.

Bug修复

[Commons] Logging 是建议被优化, 因为如果用户传入的内容是null会导致空指针异常.
[Commons] jackson-core-asl 包存在冲突， linkis1.0在兼容CDH版本时.
[PES-UDF] UDFClient存在只能获取UDF不能获取方法函数的Bug.
[PES-BML] 优化BML EngineConnHook的执行顺序，修复资源文件不可读问题.
[PES-Configuration] Linkis管理台在设置JDBC参数时，保存会出错.
[CGS-Entrance] 当一个任务包含千条sql时，存在错误执行的Bug.
[CGS-Entrance] 当sql的limit超过5000时任务会执行失败.
[CGS-Entrance] 在压测同时运行一万个任务时，日志存在记录不全的情况.
[CGS-Entrance] 在压测10000个任务时存在任务处在 Inited/Running/Scheduled不更新的情况.
[CGS-LimkisMnagager] 当管理台设置引擎为2时，在schedulis进行调度时存在会启动18个引擎的情况.
[CGS-LimkisMnagager] ECM管理存在concurrent label的值为空问题.
[EnginePlugin-Hive] 当kill 一个复杂的Hive任务时，存在不能kill Yarn上任务的偶发情况.

贡献者

Linkis 1.0.1 的发布离不开 WeDataSphere 社区的贡献者。在此感谢各位社区的贡献者!

云资源

腾讯云：

https://osp-1257653870.cos.ap-guangzhou.myqcloud.com/WeDatasphere/Linkis/1.0.1/wedatasphere-linkis-1.0.1-combined-package-dist.tar.gz

微信关注我们

原文链接：https://www.oschina.net/news/152505/linkis-1-0-1-released

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

smart-http v1.1.7 发布，可编程的国产 Http 应用微内核

smart-http 是一款基于 smart-socket 的可编程式 http 应用微内核。你可以将 smart-http 开发的程序部署在任何 Java 8 及以上版本的设备上。经过我们的不懈优化，已经最大限度的降低程序运行期间对于内存和 GC 的开销。smart-http，是一款体现了作为开源人的工匠精神的作品。开发示例服务端 public class SimpleSmartHttp { public static void main(String[] args) { HttpBootstrap bootstrap = new HttpBootstrap(); bootstrap.httpHandler(new HttpServerHandler() { @Override public void handle(HttpRequest request, HttpResponse response) throws IOException { response.write("hello smart-http<br/>".getBytes()); ...

2021-07-28

599

Jeepay是一套适合互联网企业使用的开源支付系统，支持多渠道服务商和普通商户模式。已对接微信支付，支付宝，云闪付官方接口，支持聚合码支付。 v1.5.0版本升级内容：提取jeepay-components项目，放置OSS, MQ公共组件包；重构多MQ的实现，对生产者和消费者项目的使用透明，支持无缝切换三个厂商； ActiveMQ添加账密配置，添加连接池pool配置；修改聚合码前端项目的提示信息；修改微信支付宝的参数配置项，支持自定义配置页面；修复退款订单查询条件不生效等已知问题。更多升级日志：https://www.jeequan.com/dev/update/category_1016.html 项目特点支持多渠道对接，支付网关自动路由已对接微信服务商和普通商户接口，支持V2和V3接口已对接支付宝服务商和普通商户接口，支持RSA和RSA2签名已对接云闪付服务商接口，可选择多家支付机构提供http形式接口，提供各语言的sdk实现，方便对接接口请求和响应数据采用签名机制，保证交易安全可靠系统安全，支持分布式部署，高并发管理端包括运营平台和商户系统管理平...

2021-07-28

720

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。