解决gateway报netty堆外内存溢出io.netty.util.internal.OutOfDirectMemoryError

gateway报netty堆外内存溢出io.netty.util.internal.OutOfDirectMemoryError

昨天线上网关突然无法访问。打开日志看到错误信息“io.netty.util.internal.OutOfDirectMemoryError” 堆外内存溢出。。

这也没碰到过啊，看来今天准点下班的愿望又落空了。老规矩面向百度编程。

先看看网上有没有其他兄弟碰到这个问题。

一顿搜索之后发现，很多博客都是一知半解并不能解决我的问题。

但是大概得到一个信息，这bug是有netty导致的，一般是用了ByteBuf对象没有调用release()释放内存。

但是项目代码这么多如何排查具体的问题代码呢？

我灵机一动，netty本身有没有提供排查工具呢？

继续百度发现Netty自身已经自带了内存泄漏检测工具，可用于检测出ByteBuf对象被GC回收，但ByteBuf管理的内存没有释放的情况（但不适用ByteBuf对象还没被GC回收内存泄漏的情况，例如任务队列积压）为了便于用户发现内存泄露

Netty提供4个检测级别：

• disabled 完全关闭内存泄露检测
• simple  以约1%的抽样率检测是否泄露，默认级别
• advanced  抽样率同simple，但显示详细的泄露报告
• paranoid 抽样率为100%，显示报告信息同advanced

奶思！

本地把把项目跑起来，记得加JVM参数 -Dio.netty.leakDetectionLevel=paranoid 开启netty自带检测，级别调到最高（火力全开！）。

项目跑了不一会就看到了报错信息：

如上图已经提示了错误发生的地方，自行去代码中改就好。

一般是对于ByteBuf申请相关代码的操作没有加Release操作。

可通过在ReferenceCountUtil.safeRelease(buf);来释放。

这时候大多数情况下的问题都解决了。秀儿我单纯以为终于可以喝口茶准备下班了。

事实证明，我的问题恰恰不在大部分里面。。。报错信息的位置都是在框架源码中。我去哪里加release??

经过一番激烈的研究（百度），应该是依赖版本的bug。

升级下版本就好了

<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-parent</artifactId>
<version>2.2.6.RELEASE</version>

升级到

<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-parent</artifactId>
<version>2.2.13.RELEASE</version>

<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-starter-gateway</artifactId>
    <version>2.2.5.RELEASE</version>
</dependency>

升级到

<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-starter-gateway</artifactId>
    <version>2.2.8.RELEASE</version>
</dependency>

重启，问题解决！

总结

以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。

最新评论