JVM线上问题排查和性能调优案例
大约 3 分钟
JVM 线上问题排查和性能调优也是面试常问的一个问题,尤其是社招中大厂的面试。
这篇文章,我会分享一些我看到的相关的案例。
下面是正文。
- 现象:线上某个服务有接口非常慢,通过监控链路查看发现,中间的 GAP 时间非常大,实际接口并没有消耗很多时间,并且在那段时间里有很多这样的请求。
- 分析:使用 JDK 自带的
jvisualvm
分析 dump 文件(MAT 也能分析)。 - 建议:对于 SQL 语句,如果监测到没有
where
条件的全表查询应该默认增加一个合适的limit
作为限制,防止这种问题拖垮整个系统 - 资料:实战案例:记一次 dump 文件分析历程转载 - HeapDump - 2022。
生产事故-记一次特殊的 OOM 排查 - 程语有云 - 2023
- 现象:网络没有问题的情况下,系统某开放接口从 2023 年 3 月 10 日 14 时许开始无法访问和使用。
- 临时解决办法:紧急回滚至上一稳定版本。
- 分析:使用 MAT (Memory Analyzer Tool)工具分析 dump 文件。
- 建议:正常情况下,
-Xmn
参数(控制 Young 区的大小)总是应当小于-Xmx
参数(控制堆内存的最大大小),否则就会触发 OOM 错误。 - 资料:最重要的 JVM 参数总结 - JavaGuide - 2023
一次大量 JVM Native 内存泄露的排查分析(64M 问题) - 掘金 - 2022
- 现象:线上项目刚启动完使用 top 命令查看 RES 占用了超过 1.5G。
- 分析:整个分析流程用到了较多工作,可以跟着作者思路一步一步来,值得学习借鉴。
- 建议:远离 Hibernate。
- 资料:Linux top 命令里的内存相关字段(VIRT, RES, SHR, CODE, DATA)
YGC 问题排查,又让我涨姿势了! - IT 人的职场进阶 - 2021
- 现象:广告服务在新版本上线后,收到了大量的服务超时告警。
- 分析:使用 MAT (Memory Analyzer Tool) 工具分析 dump 文件。
- 建议:学会 YGC(Young GC) 问题的排查思路,掌握 YGC 的相关知识点。
听说 JVM 性能优化很难?今天我小试了一把! - 陈树义 - 2021
通过观察 GC 频率和停顿时间,来进行 JVM 内存空间调整,使其达到最合理的状态。调整过程记得小步快跑,避免内存剧烈波动影响线上服务。 这其实是最为简单的一种 JVM 性能调优方式了,可以算是粗调吧。
你们要的线上 GC 问题案例来啦 - 编了个程 - 2021
- 案例 1:使用 guava cache 的时候,没有设置最大缓存数量和弱引用,导致频繁触发 Young GC
- 案例 2: 对于一个查询和排序分页的 SQL,同时这个 SQL 需要 join 多张表,在分库分表下,直接调用 SQL 性能很差。于是,查单表,再在内存排序分页,用了一个 List 来保存数据,而有些数据量大,造成了这个现象。
Java 中 9 种常见的 CMS GC 问题分析与解决 - 美团技术团 - 2020
这篇文章共 2w+ 字,详细介绍了 GC 基础,总结了 CMS GC 的一些常见问题分析与解决办法。
给祖传系统做了点 GC 调优,暂停时间降低了 90% - 京东云技术团队 - 2023
这篇文章提到了一个在规则引擎系统中遇到的 GC(垃圾回收)问题,主要表现为系统在启动后发生了一次较长的 Young GC(年轻代垃圾回收)导致性能下降。经过分析,问题的核心在于动态对象年龄判定机制,它导致了过早的对象晋升,引起了长时间的垃圾回收。