0

0

什么是Java中的直接内存_NIO的ByteBuffer与OOM异常处理

P粉602998670

P粉602998670

发布时间:2026-03-13 11:39:33

|

761人浏览过

|

来源于php中文网

原创

DirectByteBuffer引发OutOfMemoryError: Direct buffer memory的根本原因是堆外内存被长期占用且未及时释放,因Cleaner触发延迟导致GC无法立即回收。

什么是java中的直接内存_nio的bytebuffer与oom异常处理

DirectByteBuffer 为什么会引发 OutOfMemoryError: Direct buffer memory

根本原因不是“内存不够”,而是堆外内存被大量 DirectByteBuffer 实例长期占用,且未及时释放。每个 DirectByteBuffer 对象本身很小(在堆里),但它背后绑着一块操作系统分配的堆外内存(可能几MB甚至更大)。只要这个对象没被 GC 回收,那块堆外内存就一直占着——而 GC 回收它,又依赖于 Cleaner 的触发时机,存在明显延迟。

常见错误现象:

  • 服务运行几小时后突然报 OutOfMemoryError: Direct buffer memory,但堆内存(java.lang.OutOfMemoryError: Java heap space)完全正常
  • jstat -gc 显示 GC 频率低、老年代稳定,但系统内存持续上涨,top 看进程 RES 占用飙升
  • jcmd <pid> VM.native_memory summary</pid> 查到 InternalOther 区域持续增长(JDK 11+ 更准)

怎么安全地手动释放 DirectByteBuffer 的堆外内存

紧急兜底可用,但别当常规手段——它依赖 JDK 内部 API(sun.misc.Cleaner),在 JDK 9+ 模块化后默认被封禁,需加启动参数才能访问;JDK 17+ 更进一步限制反射调用。

实操建议:

立即学习Java免费学习笔记(深入)”;

  • 只在明确知道缓冲区已不用、且无法等待 GC 时调用,例如:自定义协议解析后立即清理临时大缓冲区
  • 必须先判断 buffer.isDirect(),否则对堆内缓冲区调用会抛 NoSuchFieldException
  • try-catch 吞掉反射异常,避免因 JDK 版本差异导致流程中断
  • 示例代码中不要硬写 sun.misc.Cleaner,应通过 MethodHandles.privateLookupIn(JDK 15+)或兼容 fallback 方式封装

典型不安全写法:buffer.cleaner().clean() —— 这行在 JDK 14+ 直接编译失败,因为 cleaner() 已被移除。

Mokker AI
Mokker AI

AI产品图添加背景

下载

ByteBuffer.allocateDirect() 的替代方案与池化实践

频繁创建/销毁直接缓冲区是绝大多数堆外 OOM 的源头。与其事后释放,不如从源头控制分配行为。

推荐做法:

  • NettyPooledByteBufAllocator 替代裸 allocateDirect(),它内部基于内存页 + slab 分配,复用率高、延迟低
  • 若不用 Netty,可考虑 Apache Commons Pool 自建 ByteBuffer 池,但注意池大小要合理(过大浪费内存,过小仍频繁分配)
  • 设置合理的缓冲区容量:避免“宁大勿小”思维,比如 HTTP body 解析用 8KB 足够,没必要默认 1MB
  • 配合 JVM 参数 -XX:MaxDirectMemorySize=512m 显式限制上限,让问题提前暴露,而不是等 OS 杀进程

监控和定位堆外内存泄漏的真实路径

别只盯着堆 dump(hprof),它几乎看不到 DirectByteBuffer 占用的堆外内存——那些内存压根不在堆里。

有效手段:

  • 启用 NIO 缓冲池监控:JDK 自带 java.nio:type=BufferPool,name=direct 这个 MBean,可通过 JConsole 或 Prometheus + JMX Exporter 抓取 TotalCapacityCount 指标,趋势异常上涨就是信号
  • jcmd <pid> VM.native_memory detail</pid>(需开启 -XX:NativeMemoryTracking=detail)查看实时堆外各区域用量,重点关注 Internal(DirectByteBuffer 主要归属)
  • 线上慎用 jmap -dump,它不会包含堆外内存信息;真正需要 dump 堆外状态时,可用 gcore + gdb(高级场景,运维配合)
  • 检查是否漏关 FileChannelSocketChannel 或未 release() Netty ByteBuf——这些资源背后往往藏着未释放的 DirectByteBuffer

最容易被忽略的一点:很多框架(如 Spring WebFlux、gRPC)底层自动使用直接缓冲区,你没写 allocateDirect,但流量一上来,它就在悄悄涨。得看文档确认其缓冲策略,必要时覆盖默认 allocator。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
spring框架介绍
spring框架介绍

本专题整合了spring框架相关内容,想了解更多详细内容,请阅读专题下面的文章。

160

2025.08.06

Java Spring Security 与认证授权
Java Spring Security 与认证授权

本专题系统讲解 Java Spring Security 框架在认证与授权中的应用,涵盖用户身份验证、权限控制、JWT与OAuth2实现、跨站请求伪造(CSRF)防护、会话管理与安全漏洞防范。通过实际项目案例,帮助学习者掌握如何 使用 Spring Security 实现高安全性认证与授权机制,提升 Web 应用的安全性与用户数据保护。

88

2026.01.26

counta和count的区别
counta和count的区别

Count函数用于计算指定范围内数字的个数,而CountA函数用于计算指定范围内非空单元格的个数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

203

2023.11.20

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

443

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

605

2023.08.10

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

443

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

605

2023.08.10

apache是什么意思
apache是什么意思

Apache是Apache HTTP Server的简称,是一个开源的Web服务器软件。是目前全球使用最广泛的Web服务器软件之一,由Apache软件基金会开发和维护,Apache具有稳定、安全和高性能的特点,得益于其成熟的开发和广泛的应用实践,被广泛用于托管网站、搭建Web应用程序、构建Web服务和代理等场景。本专题为大家提供了Apache相关的各种文章、以及下载和课程,希望对各位有所帮助。

421

2023.08.23

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

1

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 4.4万人学习

C# 教程
C# 教程

共94课时 | 11.3万人学习

Java 教程
Java 教程

共578课时 | 81.5万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号