美团动态线程池开源框架 DynamicTp v1.1.7 发布
DynamicTp 简介
DynamicTp 是一个基于配置中心的轻量级动态线程池监控管理工具,主要功能可以总结为动态调参、通知报警、运行监控、三方包线程池管理等几大类。
DynamicTp 特性
经过多个版本的迭代,目前最新版本 v1.1.7 具有以下特性 ✅
-
代码零侵入:我们改变了线程池以往的使用姿势,所有配置均放在配置中心,服务启动时会从配置中心拉取配置生成线程池对象放到 Spring 容器中,使用时直接从 Spring 容器中获取,对业务代码零侵入
-
通知告警:提供多种通知告警维度(配置变更通知、活性报警、队列容量阈值报警、拒绝触发报警、任务执行或等待超时报警),触发配置阈值实时推送告警信息,已支持企微、钉钉、飞书、邮件、云之家报警,同时提供 SPI 接口可自定义扩展实现
-
运行监控:定时采集线程池指标数据(20 多种指标,包含线程池维度、队列维度、任务维度、tps、tp99 等),支持通过 MicroMeter、JsonLog、JMX 三种方式定时获取,也可以通过 SpringBoot Endpoint 端点实时获取最新指标数据,同时提供 SPI 接口可自定义扩展实现
-
任务增强:提供任务包装功能(比 Spring 线程池任务包装更强大),实现 TaskWrapper 接口即可,如 MdcTaskWrapper、TtlTaskWrapper、SwTraceTaskWrapper、OpenTelemetryWrapper,可以支持线程池上下文信息传递
-
多配置中心支持:支持多种主流配置中心,包括 Nacos、Apollo、Zookeeper、Consul、Etcd、Polaris、ServiceComb,同时也提供 SPI 接口可自定义扩展实现
-
中间件线程池管理:集成管理常用第三方组件的线程池,已集成 Tomcat、Jetty、Undertow、Dubbo、RocketMq、Hystrix、Grpc、Motan、Okhttp3、Brpc、Tars、SofaRpc、RabbitMq 等组件的线程池管理(调参、监控报警)
-
轻量简单:使用起来极其简单,引入相应依赖,接入只需简单 4 步就可完成,顺利 3 分钟搞定,相当丝滑
-
多模式:提供了增强线程池 DtpExecutor,IO 密集型场景使用的线程池 EagerDtpExecutor,调度线程池 ScheduledDtpExecutor,有序线程池 OrderedDtpExecutor,可以根据业务场景选择合适的线程池
-
兼容性:JUC 普通线程池和 Spring 中的 ThreadPoolTaskExecutor 也可以被框架管理,@Bean 定义时加 @DynamicTp 注解即可
-
可靠性:依靠 Spring 生命周期管理,可以做到优雅关闭线程池,在 Spring 容器关闭前尽可能多的处理队列中的任务
-
高可扩展:框架核心功能都提供 SPI 接口供用户自定义个性化实现(配置中心、配置文件解析、通知告警、监控数据采集、任务包装等等)
-
线上大规模应用:参考美团线程池实践,美团内部已经有该理论成熟的应用经验
v1.1.7 发版记录
Feature
-
线程池配置增加 tryInterrupt 字段,控制任务执行超时后是否需要中断当前线程,@yanhom
-
新增 PriorityDtpExecutor,适用于可以指定任务的处理优先级场景,@KamToHung
-
指标数据采集器新增 jmx 方式,@KamToHung
-
线程池配置新增 env 字段,控制告警信息里的环境取值,@少鹏
-
告警平台配置增加 webhook 字段,降低配置复杂度,@kyao,@KamToHung
Bugfix
-
修复上下文刷新后,DtpMonitor 重复创建调度任务的问题,@trevzhang
-
修复 OpenTelemetryWrapper 没有将 traceId 传入 DynamicTp 框架的问题,@少鹏
-
修复告警时,tid 错乱问题,@yanhom
-
修复 dubbo 2.7.5 以下版本动态线程池不生效的问题,@piemon-nyah
-
修复异常拒绝任务时跳过 afterReject 执行的问题,@SimpleIto
-
修复飞书告警,机器人签名不为空时报错的问题,@guozi
Optimize
-
优化 spring-configuration-metadata,配置提示完整化,@KamToHung
-
支持 apache dubbo 最新版本,@KamToHung
-
完善 example
-
部分代码优化重构
Refactor
-
将通知告警基础包从 core 模块移动到 common 模块
-
将 plugin 插件包从 core 模块移动到 common模块
加入社群
看到这儿,方便的话给项目一个 star,你的支持是我们前进的动力!
使用过程中有任何问题,或者对项目有什么想法或者建议,可以加入社群,跟 1000+ 群友一起交流讨论。
项目地址
gitee 地址:https://gitee.com/dromara/dynamic-tp
github 地址:https://github.com/dromara/dynamic-tp
