在上一章中我们介绍了JVM运行时参数以及jstat指令相关内容:[JVM教程与调优] 什么是JVM运行时参数?。下面我们来介绍一下jmap+MAT内存溢出。

首先我们来介绍一下下JVM的内存结构。

JVM内存结构介绍

从图中我们可以看到,JVM的内存结构分为两大块。一块叫堆区,一块叫非堆区

堆区又分为两大块,一块Young,一块叫OldYoung区又分为Survivor区和Eden区。Survivor区我们又分为S0与S1。可以结合下图进行理解

非堆区呢,是属于我们操作系统的本地内存。它是独立于我们堆区之外的。它在JDK1.8里面有一个新的名字,叫MetaspaceMetaspace里面还包含几个块,其中有一块就是CCS,还有一块是CodeCache。当然,在我们的Metaspace中还包含很多其他块,这里就不做扩展了。

接下来,我们来通过实战,来更加深入的理解JVM结构,以及出现JVM内存溢出的原因。

实战理解

我们通过spring.start快速来生成一个springboot项目。

如图,我们快速的创建一个springboot项目,并将其下载下来。

这里我使用Eclipse,小伙伴们也可以使用IDEA或者其他开发工具也是可以的。

这里我们使用的是SpringBoot工程,如果有的小伙伴对SpringBoot还不太熟悉的,可以上网找一些教程先学习了解一下。

堆内存溢出演示

那么我们如何来构建一个堆内存溢出呢?其实很简单,我们只要定义一个List对象,然后通过一个循环不停的往List里面塞对象。因为只要Controller不被回收,那么它里面的成员变量也是不会被回收的。这样就会导致List里面的对象越来越多,占用的内存越来越大,最后就把我们的内存撑爆了。

创建User对象

这里我们先创建一个User对象。

  1. /**
  2. *
  3.   * <p>Title: User</p>
  4.   * <p>Description: </p>
  5.   * @author Coder编程
  6.   * @date 2020年3月29日
  7. */
  8. @Data
  9. @AllArgsConstructor
  10. @NoArgsConstructor
  11. public class User {
  12. private int id;
  13. private String name;
  14. }

这里面@Data@AllArgsConstructor@NoArgsConstructor用的是lombok注解。不会使用的小伙伴,可以在网上查找相关资料学习一下。

创建Controller对象

接下来我们来创建一个Controller来不停的往List集合中塞对象。

  1. /**
  2. *
  3.   * <p>Title: MemoryController</p>
  4.   * <p>Description: </p>
  5.   * @author Coder编程
  6.   * @date 2020年3月29日
  7. */
  8. @RestController
  9. public class MemoryController {
  10. private List<User> userList = new ArrayList<User>();
  11. /**
  12. * -Xmx32M -Xms32M
  13. * */
  14. @GetMapping("/heap")
  15. public String heap() {
  16. int i=0;
  17. while(true) {
  18. userList.add(new User(i++, UUID.randomUUID().toString()));
  19. }
  20. }
  21. }

为了更快达到我们的效果,我们来设置两个参数。

  1. -Xmx32M -Xms32M

一个最大内存,一个最小内存。我们的堆就只有32M,这样就很容易溢出。

访问测试

启动时候设置内存参数。

记得选中我们的Arguments,在JVM 参数中,将我们的值设置进去。最后点击Run运行起来。

然后我们在浏览器中请求:

http://localhost:8080/heap

我们再观察控制台打印:



通过打印结果,我们可以看到堆内存溢出了。

注意:

这里我们测试的时候可以很简单的看出在哪里出现的问题,但是在实际生产环境中并没有那么简单,因此我们需要借助工具,来定位这些问题。后续我们来介绍一下。

非堆内存溢出演示

接下来我们来演示一下非堆内存溢出,我们继续沿用上方代码。

非堆内存主要是MataSpace,那么我们如何构建一个非堆内存溢出呢?

我们知道MataSpace主要存一些class,filed,method等这些东西。

因此我们继续创建一个List集合,不断的往集合里面塞class。只要List不被回收,那么它里面的class也不会被回收。不停的往里面加之后,就会造成溢出。也就是我们的MataSpace溢出了。

如何来动态生成一些class呢?其实是有很多工具的,比如说:asm

引入asm工具包

这里我们引入asm jar包。

  1. <dependency>
  2. <groupId>asm</groupId>
  3. <artifactId>asm</artifactId>
  4. <version>3.3.1</version>
  5. </dependency>

动态生成类文件

还需要创建动态生成的类文件,这里我们就不做扩展介绍,有兴趣的小伙伴可以自行到网上查阅。

  1. /**
  2. *
  3.   * <p>Title: Metaspace</p>
  4.   * <p>Description: https://blog.csdn.net/bolg_hero/article/details/78189621
  5.   * 继承ClassLoader是为了方便调用defineClass方法,因为该方法的定义为protected</p>
  6.   * @author Coder编程
  7.   * @date 2020年3月29日
  8. */
  9. public class Metaspace extends ClassLoader {
  10. public static List<Class<?>> createClasses() {
  11. // 类持有
  12. List<Class<?>> classes = new ArrayList<Class<?>>();
  13. // 循环1000w次生成1000w个不同的类。
  14. for (int i = 0; i < 10000000; ++i) {
  15. ClassWriter cw = new ClassWriter(0);
  16. // 定义一个类名称为Class{i},它的访问域为public,父类为java.lang.Object,不实现任何接口
  17. cw.visit(Opcodes.V1_1, Opcodes.ACC_PUBLIC, "Class" + i, null,
  18. "java/lang/Object", null);
  19. // 定义构造函数<init>方法
  20. MethodVisitor mw = cw.visitMethod(Opcodes.ACC_PUBLIC, "<init>",
  21. "()V", null, null);
  22. // 第一个指令为加载this
  23. mw.visitVarInsn(Opcodes.ALOAD, 0);
  24. // 第二个指令为调用父类Object的构造函数
  25. mw.visitMethodInsn(Opcodes.INVOKESPECIAL, "java/lang/Object",
  26. "<init>", "()V");
  27. // 第三条指令为return
  28. mw.visitInsn(Opcodes.RETURN);
  29. mw.visitMaxs(1, 1);
  30. mw.visitEnd();
  31. Metaspace test = new Metaspace();
  32. byte[] code = cw.toByteArray();
  33. // 定义类
  34. Class<?> exampleClass = test.defineClass("Class" + i, code, 0, code.length);
  35. classes.add(exampleClass);
  36. }
  37. return classes;
  38. }
  39. }

创建Controller

接下来我们再原Controller新增一个方法nonheap

  1. /**
  2. *
  3.   * <p>Title: MemoryController</p>
  4.   * <p>Description: </p>
  5.   * @author Coder编程
  6.   * @date 2020年3月29日
  7. */
  8. @RestController
  9. public class MemoryController {
  10. private List<User> userList = new ArrayList<User>();
  11. private List<Class<?>> classList = new ArrayList<Class<?>>();
  12. /**
  13. * -Xmx32M -Xms32M
  14. * */
  15. @GetMapping("/heap")
  16. public String heap() {
  17. int i=0;
  18. while(true) {
  19. userList.add(new User(i++, UUID.randomUUID().toString()));
  20. }
  21. }
  22. /**
  23. * -XX:MetaspaceSize=32M -XX:MaxMetaspaceSize=32M
  24. * */
  25. @GetMapping("/nonheap")
  26. public String nonheap() {
  27. while(true) {
  28. classList.addAll(Metaspace.createClasses());
  29. }
  30. }
  31. }

访问测试

这里我们同样在启动的时候也要设置Mataspace的值大小。

  1. -XX:MetaspaceSize=32M -XX:MaxMetaspaceSize=32M

接着我们在浏览器中访问地址:localhost:8080/nonheap

以上我们就完成了对堆内存溢出以及非堆内存溢出的演示。

小插曲

在测试非堆内存溢出的时候,出现了另外一个错误。

java.lang.IncompatibleClassChangeError: Found interface org.objectweb.asm.MethodVisitor, but class was expected

这个异常另外写在java.lang.IncompatibleClassChangeError,小伙伴如果有遇到,可尝试一下是否能够解决

如何查看线上堆内存溢出以及非堆内存溢出

我们主要查看线上的内存映像文件来查看到底是哪里发生了内存溢出。

发生内存溢出的主要原因:

1.内存发生泄漏

2.内存分配不足

假如发生内存泄漏的话,我们就需要找到是哪个地方发生了内存泄漏,一直占用内存没有释放。

下面我们来看一下如何来导出我们的内存映像文件。

主要有两种方式。

1.内存溢出自动导出

-XX:+HeapDumpOnOutOfMemoryError

-XX:HeapDumpPath=./

第一个参数表示:当发生内存溢出的时候,将内存溢出文件Dump出来。

第二个参数表示:Dump出来的文件存放的目录。

2.使用jmap命令手动导出

如果我们使用第一种命令,在发送内存溢出的时候再去导出,可能就有点晚了。我们可以等程序运行起来一段时间后,就可以使用jmap命令导出来进行分析。

演示内存溢出自动导出

我们需要用到两个命令参数。

  1. -XX:+HeapDumpOnOutOfMemoryError
  2. -XX:HeapDumpPath=./

我们接着运行项目,访问:localhost:8080/heap

查看一下打印结果。

可以看到,当发生了内存溢出后。输出了一个java_pid3972.hprof的文件。

在当前项目的当前文件中,我们就可以找到该文件。

演示jmap命令

option:-heap,-clstats,-dump:,-F

参数都是什么意思呢?

live:只导出存活的对象,如果没有指定,则全部导出

format:导出文件的格式

file:导入的文件

我们刚才的程序还没有关闭,我们来看下程序的pid是多少。

输入:jps -l

我们将其文件导入到桌面中来,输入命令

  1. jmap -dump:format=b,file=heap.hprof 3972

最后的3972是程序的pid。最后可以看到导出完毕。

还有其他的命令参数,小伙伴们可以去官网jmap指令查看如何使用。这里就不做过多介绍。

下一章节我们将通过命令实战定位JVM发生死循环、死锁问题。

推荐

文末

文章收录至

Github: https://github.com/CoderMerlin/coder-programming

Gitee: https://gitee.com/573059382/coder-programming

欢迎关注并star~

[JVM教程与调优] 了解JVM 堆内存溢出以及非堆内存溢出的更多相关文章

  1. [JVM教程与调优] 什么是JVM运行时参数?

    我们接着上一章节[JVM教程与调优] JVM都有哪些参数类型?的内容继续讲解,这章我们来介绍一下:如何查看JVM运行时参数.这一点十分重要,因为我们在进行JVM参数调优的时候,我们首先得知道目前系统运 ...

  2. [JVM教程与调优] JVM都有哪些参数类型?

    JDK本身是提供了一些监控工具,有一些是命令行,也有图形界面.本次介绍命令行如何进行监控. 命令行是非常重要的,因为在我们生产环境基本上是没有图形界面的,完全是通过命令行. 主要内容: JVM的参数类 ...

  3. Java系列笔记(4) - JVM监控与调优

    目录 参数设置收集器搭配启动内存分配监控工具和方法调优方法调优实例     光说不练假把式,学习Java GC机制的目的是为了实用,也就是为了在JVM出现问题时分析原因并解决之.通过学习,我觉得JVM ...

  4. JVM监控与调优

    目录 参数设置收集器搭配启动内存分配监控工具和方法调优方法调优实例     转:http://www.cnblogs.com/zhguang/p/java-jvm-gc.html光说不练假把式,学习J ...

  5. [java] JVM监控与调优

    原文出处:http://www.cnblogs.com/zhguang/p/java-jvm-gc.html   光说不练假把式,学习Java GC机制的目的是为了实用,也就是为了在JVM出现问题时分 ...

  6. jvm原理及调优

    一.java内存管理及垃圾回收 jvm内存组成结构 jvm栈由堆.栈.本地方法栈.方法区等部分组成,结构图如下所示: (1)堆 所有通过new创建的对象的内存都在堆中分配,堆的大小可以通过-Xmx和- ...

  7. Spark性能调优之JVM调优

    Spark性能调优之JVM调优 通过一张图让你明白以下四个问题                1.JVM GC机制,堆内存的组成                2.Spark的调优为什么会和JVM的调 ...

  8. Tomcat性能调优-JVM监控与调优

    参数设置 在Java虚拟机的参数中,有3种表示方法用"ps -ef |grep "java"命令,可以得到当前Java进程的所有启动参数和配置参数: 标准参数(-),所有 ...

  9. JVM监控和调优常用命令工具总结

    JVM监控和调优 在Java应用和服务出现莫名的卡顿.CPU飙升等问题时总是要分析一下对应进程的JVM状态以定位问题和解决问题并作出相应的优化,在这过程中Java自带的一些状态监控命令和图形化工具就非 ...

随机推荐

  1. Ubuntu19.10安装OMNeT++ (omnetpp-5.6)中遇到的问题

    在官网上下载对应版本的安装包,里面有说明性的文档,先在第五章ubuntu那里配置好前期的环境,再到linux那一章,看进行安装,本文即从这里开始记录. 安装包中的文档目录为:omnetpp-5.6/d ...

  2. 跟我猜Spring-Boot:bean的创建

    废话在前 最近几年的技术路子很杂,先是node,然后是php,后来是openresty,再后来转到了java,而接触的框架(Framework),也越发的复杂,从最开始的express/koa,到lu ...

  3. Mybatis-Plus代码生成器使用详解

    首先创建springboot的项目(创建步骤省略) 创建好项目后要配置maven依赖,附上pom.xml: <?xml version="1.0" encoding=&quo ...

  4. 微信Android自动播放视频(可交互,设置层级,无控制条,非X5)ffmpeg,jsmpeg.js,.ts视频

    原料: ffmpeg : http://ffmpeg.zeranoe.com/builds/  win64 https://evermeet.cx/ffmpeg/   mac OS X 64 jsmp ...

  5. webstorm 提示 "scanning files to index..." 一直不能编译的问题

    先说一下我的操作过程吧: 下载公司的vue项目后,要用到webpack打包工具,需要按照package.json安装一些依赖,我使用了镜像后,npm install模块时候生成了一个 node_mod ...

  6. 2017、2018面试分享(js面试题记录)记得点赞分享哦;让更多的人看到~~

    2017面试分享(js面试题记录) 1. 最简单的一道题 '11' * 2 'a8' * 3 var a = 2, b = 3; var c = a+++b; // c = 5 2. 一道this的问 ...

  7. html/css系列 BFC

    本文详情:https://www.cnblogs.com/chen-... 第一种 BFC中的盒子对齐 <div class="container"> <div ...

  8. HDFS NameNode详解

    1. namenode介绍 namenode管理文件系统的命名空间.它维护着文件系统树及整棵树内所有的文件和目录.这些信息以两个文件形式永久保存在本地磁盘上:命名空间镜像文件fsimage和编辑日志文 ...

  9. AX2012/D365 SSRS报表开发

    大家好,好久没有做SSRS报表了,近期刚好有做2张,就整理起来供初学者参考. AX中SSRS报表开发的框架,父类非常多,这里跟大家简单分享2种比较常用的场景供大家使用. 1.简单的过滤字段,无特殊过滤 ...

  10. selenium+options配置文件

    from selenium.webdriver.chrome.options import Options from selenium import webdriver chrome_options ...