V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
yanhomlin
V2EX  ›  程序员

DynamicTp 新版本发布。还在为 Dubbo 线程池耗尽烦恼吗?还在为 Mq 消费积压烦恼吗?

  •  1
     
  •   yanhomlin ·
    yanhom1314 · 2022-06-13 10:37:15 +08:00 · 1132 次点击
    这是一个创建于 890 天前的主题,其中的信息可能已经有所发展或是发生改变。

    DynamicTp 简介

    DynamicTp 是一个基于配置中心实现的轻量级动态线程池管理工具,主要功能可以总结为 动态调参、通知报警、运行监控、三方包线程池管理等几大类。

    经过几个版本迭代,目前最新版本 v1.0.6 具有以下特性

    特性

    • 代码零侵入:所有配置都放在配置中心,对业务代码零侵入

    • 轻量简单:基于 springboot 实现,引入 starter ,接入只需简单 4 步就可完成,顺利 3 分钟搞定

    • 高可扩展:框架核心功能都提供 SPI 接口供用户自定义个性化实现(配置中心、配置文件解析、通知告警、监控数据采集、任务包装等等)

    • 线上大规模应用:参考美团线程池实践,美团内部已经有该理论成熟的应用经验

    • 多平台通知报警:提供多种报警维度(配置变更通知、活性报警、容量阈值报警、拒绝触发报警、任务执行或等待超时报警),已支持企业微信、钉钉、飞书报警,同时提供 SPI 接口可自定义扩展实现

    • 监控:定时采集线程池指标数据,支持通过 MicroMeter 、JsonLog 日志输出、Endpoint 三种方式,可通过 SPI 接口自定义扩展实现

    • 任务增强:提供任务包装功能,实现 TaskWrapper 接口即可,如 TtlTaskWrapper 可以支持线程池上下文信息传递,以及给任务设置标识 id ,方便问题追踪

    • 兼容性:JUC 普通线程池也可以被框架监控,@Bean 定义时加 @DynamicTp 注解即可

    • 可靠性:框架提供的线程池实现 Spring 生命周期方法,可以在 Spring 容器关闭前尽可能多的处理队列中的任务

    • 多模式:参考 Tomcat 线程池提供了 IO 密集型场景使用的 EagerDtpExecutor 线程池

    • 支持多配置中心:基于主流配置中心实现线程池参数动态调整,实时生效,已支持 Nacos 、Apollo 、Zookeeper 、Consul ,同时也提供 SPI 接口可自定义扩展实现

    • 中间件线程池管理:集成管理常用第三方组件的线程池,已集成 Tomcat 、Jetty 、Undertow 、Dubbo 、RocketMq 、Hystrix 等组件的线程池管理(调参、监控报警)

    官网上线

    随着 v1.0.6 的发布我们上线了 DynamicTp 官网: https://dynamictp.cn

    介绍文档、使用说明等都可以查看官网了解更多,以后新特性也会优先发布到官网上

    欢迎大家体验 👏🏻

    v1.0.6 发布记录

    距离 v1.0.5 发布已经有差不多 2 个月时间,这个版本框架源码调整还是比较大的,重构了好一些功能,主要是围绕第三方中间件线程池集成来改动的,是向前兼容的,同时修复了三个小 bug 。

    如果你有下述痛点,快快升级体验吧。

    1 )如果你在使用 Dubbo ,那么你大概率遇到过 Dubbo 线程池耗尽的情况,是不是很烦恼呢?尝试使用下 DynamicTp 的 Dubbo 线程池管理功能,结合告警、实时监控、动态调参等功能尽可能降低 Dubbo 线程池耗尽,请求拒绝的风险。

    2 ) mq 应该是很多互联网系统都会使用到的中间件,使用 mq 经常会遇到的其中一个问题就是消息积压问题,具体啥原因导致积压需要具体问题具体分析,就 RocketMq 来说,消费端是使用线程池进行处理消息的,所以说线程池的设置也会直接或者间接影响到消费速度,需要对此进行监控、告警、以及动态调参,尽可能降低因线程池设置而导致的积压风险。

    注意:springboot 内置的三大 webserver 集成包默认会引入,不需要额外引入,其他三方组件的包需要自己引入,具体查看官网

    Features

    • 报警渠道接入飞书

    • 支持 Apache Dubbo & Alibab Dubbo 服务端提供端线程池管理

    • 支持 RocketMq 消费端线程池管理

    • 支持 Hystrix 线程池管理

    • 支持 SpringBoot 内置三大 WebServer ( Tomcat 、Jetty 、Undertow )线程池管理

    • 增加线程池别名配置,提升告警信息可读易懂性

    • 提供任务包装类 NamedRunable ,提交任务时设置标识名称,方便问题追踪

    • 告警项自定义配置,不配置的项用默认值

    BugFix

    • 修复并发导致通知报警信息发送多条的问题

    • 修复通知渠道配置修改不能动态更新问题

    • 修复钉钉手机端报警信息高亮失效问题

    Refactor

    • 重构部分通知告警模块实现,支持三方中间件通知告警

    • 重构调整 adapter 、starter 模块代码组织结构

    项目地址

    目前累计 1.3k star ,感谢你的 star ,欢迎 pr ,业务之余一起给开源贡献一份力量

    官网https://dynamictp.cn

    gitee 地址https://gitee.com/dromara/dynamic-tp

    github 地址https://github.com/dromara/dynamic-tp

    加入社群

    使用过程中有任何问题,或者对项目有什么想法或者建议,可以加入社群,跟群友一起交流讨论。

    微信群已满 200 人,可以加我个人微信拉群(备注:dynamic-tp )。

    wechat.jpeg

    目前尚无回复
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5151 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 09:38 · PVG 17:38 · LAX 01:38 · JFK 04:38
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.