线上dubbo线程池耗尽CyclicBarrier线程屏障异常解决记录

 更新时间:2022年03月01日 11:10:53   作者:kl  
系统相关使用人员反馈系统故障,这篇文章主要介绍了线上dubbo线程池耗尽CyclicBarrier线程屏障异常解决的记录,有需要的朋友可以借鉴参考下

事件背景

系统相关使用人员反馈系统故障,日志显示从ams系统服务提示dubbo处理线程不足,具体异常信息如下:

问题定位

从上图可知,dubbo的处理线程池满了,默认200个线程,活动线程也是200个。这个现象非常不正常,我们的应用并发还没有到这个程度能同时占用200个线程处理请求。然后去读了下dubbo源码,发现dubbo也认为这种情况不正常,然后帮我们记录了应用的线程堆栈信息,这个非常赞。代码如下:

上面这段代码,在线程池不够用时,会每隔十分钟输出一份dump文件到用户目录,如:

在dump文件中,我们找到了耗尽DubboServerHandler线程池最后一个线程

通过分析得知:是我们应用程序有段代码导致的问题,在特定条件下会触发线程死锁,代码如下

代码中定义了一个线程屏障CyclicBarrier,同行数(调用await的线程数)是11,用来处理十个线程的运算,然后都计算完后拿到处理结果。本身代码没有什么问题,在没有并发的情况下,不会触发问题。但是注意中间那个箭头,执行线程的线程池是固定大小20的线程池,故当同时并发数多于2个的时候线程池的线程会不够用,导致线程等待,然后CyclicBarrier的main线程也会等待其他线程中的await。这就造成了相互等待,下一个请求过来还是继续等待,也就是死锁了。至此所有问题都以清晰明朗了。

解决问题

方案一:改CyclicBarrier为CountDownLatch,这个两个并发工具都是jdk1.5推出为了简化并发编程,CyclicBarrier的await会占用线程池中的线程不释放,导致线程不足,而CountDownLatch的count不会

方案二:改线程池类型为CachedThreadPool,不会应为线程池线程不够用,导致相互等待

文末结语

java并发包提供了丰富的api来简化多线程模型的开发,但是在针对多线程模型业务开发时,我们还需要多留心下多线程带来的坑。总之多核时代推荐大家多使用多线程开发,同时,也要对使用的工具有更多的了解

以上就是线上dubbo线程池耗尽CyclicBarrier线程屏障异常的详细内容,更多关于dubbo线程池耗尽CyclicBarrier线程屏障的资料请关注脚本之家其它相关文章!

相关文章

  • SpringMVC 整合SSM框架详解

    SpringMVC 整合SSM框架详解

    这篇文章主要介绍了SpringMVC 整合SSM框架详解,本篇文章通过简要的案例,讲解了该项技术的了解与使用,以下就是详细内容,需要的朋友可以参考下
    2021-08-08
  • Java获取工程路径方法详解

    Java获取工程路径方法详解

    这篇文章主要介绍了Java获取工程路径方法详解,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2020-03-03
  • java多线程抓取铃声多多官网的铃声数据

    java多线程抓取铃声多多官网的铃声数据

    很容易就能发现通过改变 listId和page就能从服务器获取铃声的json数据, 通过解析json数据, 可以看到都带有{"hasmore":1,"curpage":1}这样子的指示,通过判断hasmore的值,决定是否进行下一页的抓取。 但是通过上面这个链接返回的json中不带有铃声的下载地址
    2016-04-04
  • spring-session简介及实现原理源码分析

    spring-session简介及实现原理源码分析

    这篇文章主要介绍了spring-session简介及实现原理源码分析,具有一定参考价值,需要的朋友可以了解下。
    2017-11-11
  • Java之 TreeSet的详细使用说明

    Java之 TreeSet的详细使用说明

    这篇文章主要介绍了Java之 TreeSet的详细使用说明,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-02-02
  • Java阻塞延迟队列DelayQueue原理及使用详解

    Java阻塞延迟队列DelayQueue原理及使用详解

    这篇文章主要介绍了Java阻塞延迟队列DelayQueue原理及使用详解,阻塞队列是一个支持两个附加操作的队列,这两个附加的操作是:在队列为空时,从队列中获取元素的消费者线程会一直等待直到队列变为非空,需要的朋友可以参考下
    2023-12-12
  • Java实现订单超时未支付自动取消的8种方法总结

    Java实现订单超时未支付自动取消的8种方法总结

    这篇文章主要为大家介绍了Java实现订单超时未支付自动取消功能的8种不同方法,文中的示例代码讲解详细,感兴趣的小伙伴可以了解一下
    2022-08-08
  • Java中增强for循环代码示例

    Java中增强for循环代码示例

    这篇文章主要给大家介绍了Java中增强for循环的相关资料,for/in循环就是JDK5.0中所谓的增强For循环,它能对数组和集合进行遍历,使用它会使用你的代码短小而精炼的多,需要的朋友可以参考下
    2023-10-10
  • java实现日历窗口小程序

    java实现日历窗口小程序

    这篇文章主要为大家详细介绍了java实现日历窗口小程序,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2022-06-06
  • Java中List遍历删除元素remove()的方法

    Java中List遍历删除元素remove()的方法

    这篇文章主要介绍了Java中List遍历删除元素remove()的方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2020-11-11

最新评论