JVM修炼之路【11】- 解决内存溢出、内存泄漏 以及相关案例

前面的10篇 都是基础的知识,包括类加载的过程 类加载的细节,jvm内存模型 垃圾回收 等等,
这一篇我们开始实战了解一下 各种疑难杂症:怎么监控 怎么发现 怎么解决

内存溢出 内存泄漏

这两个概念在垃圾回收器里面已经讲过了,
当一个对象我们已经不再使用 但是我们又没有明确的断掉它 可达性分析法觉得他不能回收 一直存在堆内存里面——这就是内存溢出

随着内存溢出 越来越多 最后吧内存撑爆 造成OOM ——这就是内存泄漏

下面介绍一款企业级的JVM监控 :Prometheus 负责收集监控数据 grafana负责可视化显示
在这里插入图片描述

首先当我们看到内存趋势图 要会分辨,内存图频繁上升是正常的 因为程序的运行过程就会创建对象,但是一直上升下不来 这就是有问题的 说明有对象没回收 然后越积越多

在这里插入图片描述

JVM内存问题经典案例

先来一个最经典的,大家学习线程池的时候 书或者博客资料上面 都会有这个例子;

就是 线程池中使用 threadlocal

在这里插入图片描述
我们知道 threadlocal里面存的是本地线程的副本,当一个线程销毁时 它对应的threadlocal的副本数据 也就销毁了,

但是线程池是一个例外 我们讲过 为了节省线程 不断 新建和销毁的成本 所以设计了线程池,线程池里面核心线程都是活的, 如果我们不手动执行 remove, 那么threadlocal 就会一直占用堆内存

如果遇到大数据量和高数量的线程池 就有可能造成OOM


并发请求量过大 这个很好理解 也很常见,一个系统的并发请求量是有限的,如果有大量的用户短时间内同时访问 访问过程中大量创建对象 就很容易造成 堆内存溢出 OOM.

在这里插入图片描述


过多的线程创建
这种情况也会有,不管是线程池的参数设置,还是程序中某些设计里面 手动创建了大量的线程
,每个线程都占用一定的内存,可能会导致内存溢出。


超大对象 或者大文件IO 读写

这种情况也很多 ,比如你的对象里面有那种text 大字段 , 你select的时候 一次性select几万条数据出来 可能瞬间就把内存撑爆了。

还有大文件读写,比如你的web 写了一个文件下载功能,但是你没有限制文件下载的大小,用户直接下一个超级大的文件,jvm也会oom

mq的消息补偿机制是什么 是不是消费者消费失败 还可以再拉取一次消息


怎么样定位内存问题

接下来说最最重要的, 我们上面说了 内存溢出的几个案例 和原理, 那么线上系统当我们真正遇到内存溢出的时候,我们怎样去定位?

我们平时生活中生病去查病因的时候 回去医院拍个片子,这个片子上面记录的就是我们身体状况的一个快照。

同样线上服务出现了oom 或者其他内存问题的时候 我们也要拍一个片子 把内存溢出那个时间点的 快照拿到 去观察下 内存的情况
在这里插入图片描述
这个快照就是heap profile文件, 这个文件怎么生成呢?
一种方式是配置参数
在这里插入图片描述
这样如果发生了oom 系统就回自动的输出快照文件到你的指定目录

但是这种方式比较被动,如果系统发生了内存问题 内存占用量比较大,但是还没破那个店 没有oom 这时候你迫不及待就想分析解决 那么你就主动生成这个文件:

在这里插入图片描述
看 arthas 又出现了! 很方便

heap profile文件里面记录的就是内存的详细情况。

然后快照文件是导出来了,怎么看它呢? 你直接txt打开吗? 肯定是不行的

有2种打开方式 一种是MAT软件打开 (这种不太方便以为线上机器 安装MAT 还有再导出结果 不是很顺手)

第二种方式就是线上诊断系统,现在很多企业都会有自己自研的或者包装的(也可能他们的诊断系统内核就是MAT)诊断系统 你只需要把快照文件上传。

然后当你用正确的工具打开它时 看直方图:
这里看看深堆大小排序 排在最前面的 就是占用内存最大的对象
在这里插入图片描述

但是仅仅看直方图还不够,我们希望精确的找到 是哪一个接口方法 造成了内存问题:
我们打开直方图 旁边那个按钮 支配树, 然后我们找到占用内存排序顶端的这个线程
你看这个名字 http-nio-8081 一看就是Tomcat创建的用户线程。

然后接下来重点来了 下面这么多方法 我们应该看哪一个

这时候回忆起我们之前学过的基础的 springmvc中 有一个核心方法 HandlerMethod 就是下面红框箭头标出来的那个

是他负责把请求对象 发到 对应的控制器方法。

在这里插入图片描述

所以我们点开它 ,然后最后一栏描述中 就清清楚楚的表明了 是哪一个接口方法造成了 内存溢出:

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/811640.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

云原生(八)、Kubernetes基础(一)

K8S 基础 # 获取登录令牌 kubectl create token admin --namespace kubernetes-dashboard1、 NameSpace Kubernetes 启动时会创建四个初始名字空间 default:Kubernetes 包含这个名字空间,以便于你无需创建新的名字空间即可开始使用新集群。 kube-node-lease: 该…

【学习】VScode修改侧边栏大小。

侧边栏不可以直接更改,所以先缩放整体界面,再改变工作区大小。 缩放整体界面: Ctrl 或 Ctrl - 。 也可以直接使用如下代码: Ctrl Shifit p 打开搜索 settings ,选择下图第一个。 然后嵌入如下代码&#xff1a…

股票价格预测 | Python使用GAN预测股票价格

文章目录 效果一览文章概述代码设计效果一览 文章概述 生成对抗网络(GAN)是一种强大的机器学习模型,用于生成以假乱真的数据。然而,使用GAN来预测股票价格可能会面临以下挑战: 数据可用性:GAN需要大量的数据进行训练,以便生成准确的输出。对于股票价格预测,历史股票价…

前端响应式布局方式及其优缺点大全

前端响应式布局方式及其优缺点大全 1. 什么是响应式布局2. 响应式布局方式有哪些1. 媒体查询布局2. Flex弹性布局3. 百分比布局4. vw/vh响应式布局5. rem响应式布局 3. 结语 1. 什么是响应式布局 对于不同宽度和高度的屏幕,通过一套代码使页面样式根据屏幕尺寸自适应…

OpenHarmony开发——Makefile方式组织编译的库移植

以yxml库为例,其移植过程如下文所示。 源码获取 从仓库获取yxml源码,其目录结构如下表: 表1 源码目录结构 名称描述yxml/bench/benchmark相关代码yxml/test/测试输入输出文件,及测试脚本yxml/Makefile编译组织文件yxml/.gitat…

基于机器学习的识别准确率不高问题

识别准确率不高,可能存在以下几个方面的原因: 数据质量:数据集中可能存在错误、不完整或与实际情况偏离的情况。数据清洗和预处理是解决这个问题的关键。 数据不平衡:某些类别的样本过多,而其他类别的样本过少&#x…

sklearn的LabelEncoder 遇到新值的解决办法

问题:sklearn的LabelEncoder函数遇到新值报错 sklearn的LabelEncoder函数,在fit结束后,对dataframe数据进行transform的时候,如果遇到了没在fit时编码规则里的新值,会出现代码报错,不同于spark的LabelEnco…

SQL中的INNER JOIN与笛卡尔积:区别与实例详解

SQL中的INNER JOIN与笛卡尔积:区别与实例详解 引言1. 笛卡尔积(Cartesian Product)定义与概念结果特点 2. INNER JOIN定义与概念结果特点 3. 区别与比较4. 实例演示5. 总结 引言 在SQL查询中,INNER JOIN和笛卡尔积(Car…

【示例】Mybatis-标签学习+Mybatis工作流程

前言 本文主要学习Mybatis相关标签的使用及Mybatis的工作流程。 文中用到的示例,代码存储位置: GitHubhttps://github.com/Web-Learn-GSF/Java_Learn_Examples父工程Java_Framework_Mybatis 基础 示例 | 初始Mybatis 数据库初始化 -- 建表 CREATE…

深入探索自然语言处理:用Python和BERT构建文本分类模型

在当今的信息时代,自然语言处理(NLP)技术正在改变我们理解和处理自然语言的方式。NLP使计算机能够解读、理解和生成人类语言,从而在多种应用中实现自动化,如聊天机器人、情感分析和文本分类。本文将详细介绍如何使用Py…

Elasticsearch安装、启动异常问题总结

安装es、kibana、ik分词器可参考:http://t.csdnimg.cn/59mEG 1. 内核过低 我们使⽤的是 centos6 ,其 linux 内核版本为 2.6 。⽽ Elasticsearch 的插件要求⾄少 3.5 以上版 本。不过没关系,我们禁 ⽤这个插件即可。 修改 elasticsearch.ym…

俄罗斯游戏市场分析与海外营销策略洞察

俄罗斯作为全球十大经济体之一,拥有广阔的游戏市场。以下是对俄罗斯游戏市场的一些关键要素的分析: 人口基础:俄罗斯人口众多,游戏用户群体庞大。根据统计数据,俄罗斯的游戏人口超过7000万,占其总人口的相当…

spring boot整合Redis监听数据变化

一、前言 Redis提供了数据变化的通知事件,可以实时监测key和value的变化,客户端可以通过订阅相关的channel来接收这些通知事件,然后做相应的自定义处理,详细的介绍可以参考官方文档Redis keyspace notifications | Docs 使用Red…

使用element-plus中的表单验证

标签页代码如下&#xff1a; // 注意&#xff1a;el-form中的数据绑定不可以用v-model&#xff0c;要使用:model <el-form ref"ruleFormRef" :rules"rules" :model"userTemp" label-width"80px"><el-row :gutter"20&qu…

一次http访问超时服务器端调试

问题&#xff1a;http访问服务器时没有返回&#xff0c;没有超时&#xff0c;一直在阻塞 处理过程&#xff1a;telnet端口能连上&#xff0c;服务端程序也不存在处理时间过长的情况。 说明tcp连接没问题。推测是客户端连接后再发起请求&#xff0c;服务端阻塞了。因为很多客户…

关于 TDengine 的时区(timeZone)问题

背景 在学习SagooIOT物联网平台使用docker部署TDengine时序数据库&#xff0c;根据时间戳&#xff08;timestamp&#xff09;ts查询上报设备数据时 发现结果跟查询条件不匹配。查询问题原因竟然是timezone时区设置问题。 查询数据结果&#xff1a; 查看容器时区&#xff1a; …

分类算法——sklearn转换器和估计器(一)

转换器&#xff08;特征工程的父类&#xff09; 实例化&#xff08;实例化的是一个转换器类&#xff08;Transformer&#xff09;&#xff09;调用fit_transform&#xff08;对于文档建立分类词频矩阵&#xff0c;不能同时调用&#xff09; 把特征工程的接口称之为转换器&…

什么是跨域?

跨域&#xff08;Cross-Origin&#xff09;指的是在Web开发中&#xff0c;一个网页的资源&#xff08;例如脚本、样式表、图片等&#xff09;请求另一个源的资源时&#xff0c;两个源的协议、域名或端口不相同。简单来说&#xff0c;当浏览器试图从一个源加载来自不同源的资源时…

当你的项目体积比较大?你如何做性能优化

在前端开发中&#xff0c;项目体积优化是一个重要的环节&#xff0c;它直接影响到网页的加载速度和用户体验。随着前端项目越来越复杂&#xff0c;引入的依赖也越来越多&#xff0c;如何有效地减少最终打包文件的大小&#xff0c;成为了前端工程师需要面对的挑战。以下是一些常…

汽车咨询|基于SprinBoot的汽车资讯管理系统设计与实现(源码+数据库+文档)

汽车资讯管理系统目录 基于SprinBoot的汽车资讯管理系统设计与实现 一、前言 二、系统设计 三、系统功能设计 四、数据库设计 五、核心代码 六、论文参考 七、最新计算机毕设选题推荐 八、源码获取&#xff1a; 博主介绍&#xff1a;✌️大厂码农|毕设布道师&#xff…