您好!
欢迎来到京东云开发者社区
登录
首页
博文
课程
大赛
工具
用户中心
开源
首页
博文
课程
大赛
工具
开源
更多
用户中心
开发者社区
>
博文
>
了解Java线程池的原理和监控
分享
打开微信扫码分享
点击前往QQ分享
点击前往微博分享
点击复制链接
了解Java线程池的原理和监控
自猿其说Tech
2022-09-22
IP归属:未知
22840浏览
计算机编程
### 1 什么是线程池 简单看名字就知道是装有线程的池子,我们可以把要执行的多线程交给线程池来处理,和连接池的概念一样,通过维护一定数量的线程池来达到多个线程的复用。 ### 2 线程池的好处 我们知道不用线程池的话,每个线程都要通过new Thread(xxRunnable).start()的方式来创建并运行一个线程,线程少的话这不会是问题,而真实环境可能会开启多个线程让系统和程序达到最佳效率,当线程数达到一定数量就会耗尽系统的CPU和内存资源,也会造成GC频繁收集和停顿,因为每次创建和销毁一个线程都是要消耗系统资源的,如果为每个任务都创建线程这无疑是一个很大的性能瓶颈。所以,线程池中的线程复用极大节省了系统资源,当线程一段时间不再有任务处理时它也会自动销毁,而不会长驻内存。 ### 3 使用线程池能解决的问题 1. 创建/销毁线程伴随着系统开销,过于频繁的创建/销毁线程,会很大程度上影响处理效率 例如:记创建线程消耗时间T1,执行任务消耗时间T2,销毁线程消耗时间T3,如果T1+T3>T2,那么是不是说开启一个线程来执行这个任务太不划算了!正好,线程池缓存线程,可用已有的闲置线程来执行新任务,避免了T1+T3带来的系统开销 1. 线程并发数量过多,抢占系统资源从而导致阻塞 我们知道线程能共享系统资源,如果同时执行的线程过多,就有可能导致系统资源不足而产生阻塞的情况 运用线程池能有效的控制线程最大并发数,避免以上的问题 1. 对线程进行一些简单的管理 比如:延时执行、定时循环执行的策略等,运用线程池都能进行很好的实现 ### 4 线程池的优势 在业务场景中, 如果一个对象创建销毁开销比较大, 那么此时建议池化对象进行管理。 例如线程,jdbc连接等等, 在高并发场景中, 如果可以复用之前销毁的对象, 那么系统效率将大大提升。另外一个好处是可以设定池化对象的上限, 例如预防创建线程数量过多导致系统崩溃的场景。 ### 5 线程池类的主要参数 - corePoolSize:线程池的核心大小,也可以理解为最小的线程池大小。 - maximumPoolSize:最大线程池大小。 - keepAliveTime:空余线程存活时间,指的是超过corePoolSize的空余线程达到多长时间才进行销毁。 - unit:销毁时间单位。 - workQueue:存储等待执行线程的工作队列。 - threadFactory:创建线程的工厂,一般用默认即可。 - handler:拒绝策略,当工作队列、线程池全已满时如何拒绝新任务,默认抛出异常。 ### 6 线程池的工作原理 1. 如果线程池中的线程小于corePoolSize时就会创建新线程直接执行任务。 2. 如果线程池中的线程大于corePoolSize时就会暂时把任务存储到工作队列workQueue中等待执行。 3. 如果工作队列workQueue也满时,当线程数小于最大线程池数maximumPoolSize时就会创建新线程来处理,而线程数大于等于最大线程池数maximumPoolSize时就会执行拒绝策略。 一般流程图如下(要详细了解各类线程池流程图的可移步到 https://www.cnblogs.com/linguanh/p/8000063.html ) ![](//img1.jcloudcs.com/developer.jdcloud.com/230a2fd4-43bc-4a9f-b720-26bf71ea7e3120220922144837.jpg) ### 7 线程池大小设置 配置线程池的大小可根据以下几个维度进行分析来配置合理的线程数: 1. 任务性质可分为:CPU密集型任务,IO密集型任务,混合型任务。 2. 任务的执行时长。 3. 任务是否有依赖——依赖其他系统资源,如数据库连接等。 - CPU密集型任务 尽量使用较小的线程池,一般为CPU核数+1。 因为CPU密集型任务使得CPU使用率很高,若开过多的线程数,只能增加上下文切换的次数,因此会带来额外的开销。 - IO密集型任务 可以使用稍大的线程池,一般为2*CPU核数+1。 因为IO操作不占用CPU,不要让CPU闲下来,应加大线程数量,因此可以让CPU在等待IO的时候去处理别的任务,充分利用CPU时间。 - 混合型任务 可以将任务分成IO密集型和CPU密集型任务,然后分别用不同的线程池去处理。 只要分完之后两个任务的执行时间相差不大,那么就会比串行执行来的高效。 因为如果划分之后两个任务执行时间相差甚远,那么先执行完的任务就要等后执行完的任务,最终的时间仍然取决于后执行完的任务,而且还要加上任务拆分与合并的开销,得不偿失 - 依赖其他资源 如某个任务依赖数据库的连接返回的结果,这时候等待的时间越长,则CPU空闲的时间越长,那么线程数量应设置得越大,才能更好的利用CPU。 借鉴别人的文章 对线程池大小的估算公式: 最佳线程数目 = ((线程等待时间+线程CPU时间)/线程CPU时间 )* CPU数目 比如平均每个线程CPU运行时间为0.5s,而线程等待时间(非CPU运行时间,比如IO)为1.5s,CPU核心数为8,那么根据上面这个公式估算得到:((0.5+1.5)/0.5)*8=32。 可以得出一个结论: 线程等待时间所占比例越高,需要越多线程。线程CPU时间所占比例越高,需要越少线程。 但是通过公式计算出来的线程池大小也只是参考,准确的线程池设置大小还是需要经过性能测试验证获得的。 ### 8 线程池监控 通过工具类监控线程池的使用、状态等,例如通过JDK自带的Jconsole、Jvisualvm监控 1)首先我们先手动创建一个简单的死锁程序并运行 ![](//img1.jcloudcs.com/developer.jdcloud.com/53bb5382-fab4-414e-b87d-003bf6619c0320220922145002.png) 2)使用JDK自带的Jconsole进行监控,选择text进程并连接 ![](//img1.jcloudcs.com/developer.jdcloud.com/87bfc505-456f-4a76-ae9c-bcc892bc252f20220922145015.png) 3)点击检测死锁,选择线程并查看信息,可以定位到java代码发生死锁的位置 ![](//img1.jcloudcs.com/developer.jdcloud.com/8e60701f-5d2f-49fa-90ab-7770f9caa1a620220922145041.png) ![](//img1.jcloudcs.com/developer.jdcloud.com/4e312f8e-2269-404d-ac06-9823142fe37220220922145046.png) 4)使用JAVA自带的jvisualvm进行监控,选择text进程 ![](//img1.jcloudcs.com/developer.jdcloud.com/7d3c141c-a4ad-4774-8c71-5ed647ce09e920220922145101.png) 5)选择线程TAB,查看线程信息,如果存在死锁会出现下图的样式 ![](//img1.jcloudcs.com/developer.jdcloud.com/93b07b4a-afb5-4023-9588-571225b3f3d920220922145120.png) 6)点击线程Dump之后进入新页面拖到最底下就能看到线程死锁详细信息 ![](//img1.jcloudcs.com/developer.jdcloud.com/424b82ad-28c9-484b-9aa0-a43b8039ac0f20220922145137.png) 另外除了监控线程死锁,还可以通过线程池提供的以下参数对线程池进行监控。 - taskCount:线程池需要执行的任务数量,包括已经执行完的、未执行的和正在执行的。 - completedTaskCount:线程池在运行过程中已完成的任务数量,completedTaskCount <= taskCount。 - largestPoolSize:线程池曾经创建过的最大线程数量,通过这个数据可以知道线程池是否满过。如等于线程池的最大大小,则表示线程池曾经满了。 - getPoolSize: 线程池的线程数量。如果线程池不销毁的话,池里的线程不会自动销毁,所以线程池的线程数量只增不减。 - getActiveCount:获取活动的线程数。 ### 9 总结 对于监控而言,不在于手段的多样性,而需要明白监控的本质,以及需要的监控项内容,找出系统瓶颈,规避风险。 ------------ ###### 自猿其说Tech-JDL京东物流技术与数据智能部 ###### 作者:安甲舒
原创文章,需联系作者,授权转载
上一篇:浅谈测试用例设计
下一篇:提高IT运维效率,深度解读京东云基于自然语言处理的运维日志异常检测AIOps落地实践
相关文章
Taro小程序跨端开发入门实战
Flutter For Web实践
配运基础数据缓存瘦身实践
自猿其说Tech
文章数
426
阅读量
2149964
作者其他文章
01
深入JDK中的Optional
本文将从Optional所解决的问题开始,逐层解剖,由浅入深,文中会出现Optioanl方法之间的对比,实践,误用情况分析,优缺点等。与大家一起,对这项Java8中的新特性,进行理解和深入。
01
Taro小程序跨端开发入门实战
为了让小程序开发更简单,更高效,我们采用 Taro 作为首选框架,我们将使用 Taro 的实践经验整理了出来,主要内容围绕着什么是 Taro,为什么用 Taro,以及 Taro 如何使用(正确使用的姿势),还有 Taro 背后的一些设计思想来进行展开,让大家能够对 Taro 有个完整的认识。
01
Flutter For Web实践
Flutter For Web 已经发布一年多时间,它的发布意味着我们可以真正地使用一套代码、一套资源部署整个大前端系统(包括:iOS、Android、Web)。渠道研发组经过一段时间的探索,使用Flutter For Web技术开发了移动端可视化编程平台—Flutter乐高,在这里希望和大家分享下使用Flutter For Web实践过程和踩坑实践
01
配运基础数据缓存瘦身实践
在基础数据的常规能力当中,数据的存取是最基础也是最重要的能力,为了整体提高数据的读取能力,缓存技术在基础数据的场景中得到了广泛的使用,下面会重点展示一下配运组近期针对数据缓存做的瘦身实践。
自猿其说Tech
文章数
426
阅读量
2149964
作者其他文章
01
深入JDK中的Optional
01
Taro小程序跨端开发入门实战
01
Flutter For Web实践
01
配运基础数据缓存瘦身实践
添加企业微信
获取1V1专业服务
扫码关注
京东云开发者公众号