关闭 x
IT技术网
    技 采 号
    ITJS.cn - 技术改变世界
    • 实用工具
    • 菜鸟教程
    IT采购网 中国存储网 科技号 CIO智库

    IT技术网

    IT采购网
    • 首页
    • 行业资讯
    • 系统运维
      • 操作系统
        • Windows
        • Linux
        • Mac OS
      • 数据库
        • MySQL
        • Oracle
        • SQL Server
      • 网站建设
    • 人工智能
    • 半导体芯片
    • 笔记本电脑
    • 智能手机
    • 智能汽车
    • 编程语言
    IT技术网 - ITJS.CN
    首页 » JAVA »遗失的JVM堆内存

    遗失的JVM堆内存

    2015-02-15 00:00:00 出处:ImportNew
    分享

    “HI,你能不能过来帮我看下这个奇怪的现象 ”我之所以会写这篇文章是因为我在一个技术支持的案例中遇到了这么一个情况。这个问题是由于不同的JVM工具所检测出来的可用内存的大小不一致所产生的。

    简言之,就是有一个工程师在排查某个应用内存使用过多的问题,而他一直“认为”这个程序的堆是2G的。由于某些原因,JVM工具貌似也不太确定这个进程的堆到底有多大。比如说,jconsole认为这个堆的最大可用内存为1963M,而jvisualvm检测出来的是2048m。那么到底哪个才是对的,为什么不同的工具会显示出不同的结果呢?

    这的确很蹊跷,尤其是嫌疑最大的JVM也被排除掉了——JVM是没有动过其它手脚的,因为:

    -Xmx与-Xms的配置值相等,因此在运行时堆增长的时候这个数值是不会变的。 由于关掉了自适应调整的策略(-XX:-UseAdaptiveSizePolicy),JVM也无法动态地调整内存池的大小。

    问题重现

    要弄清楚这个问题首先得看一下实现的工具本身。要获取可用内存的信息,最简单的方式就是下面这种了:

    System.out.println("Runtime.getRuntime().maxMemory()="+Runtime.getRuntime().maxMemory());

    没错,这也正是这些工具目前所使用的方法。要解决这个问题首先得有一个能复现问题的测试用例。因此我写了这么一段代码:

    package eu.plumbr.test;
    //imports skipped for brevity
    
    public class HeapSizeDifferences {
    
      static Collection<Object> objects = new ArrayList<Object>();
      static long lastMaxMemory = 0;
    
      public static void main(String[] args) {
        try {
          List<String> inputArguments = ManagementFactory.getRuntimeMXBean().getInputArguments();
          System.out.println("Running with: " + inputArguments);
          while (true) {
            printMaxMemory();
            consumeSpace();
          }
        } catch (OutOfMemoryError e) {
          freeSpace();
          printMaxMemory();
        }
      }
    
      static void printMaxMemory() {
        long currentMaxMemory = Runtime.getRuntime().maxMemory();
        if (currentMaxMemory != lastMaxMemory) {
          lastMaxMemory = currentMaxMemory;
          System.out.format("Runtime.getRuntime().maxMemory(): %,dK.%n", currentMaxMemory / 1024);
        }
      }
    
      static void consumeSpace() {
        objects.add(new int[1_000_000]);
      }
    
      static void freeSpace() {
        objects.clear();
      }
    }

    这段代码通过new int[1000000]来不停地进行内存分配,并检测JVM当前可用内存的大小。如果它发现内存大小发生了变化,它会将Runtime.getRuntime().maxMemory()的结果给打印出来,就像这样:

    Running with: [-Xms2048M, -Xmx2048M]
    Runtime.getRuntime().maxMemory(): 2,010,112K.

    没错,尽管我已经指定了JVM使用的堆是2G的,但是运行时就是有85M不见了。你可以把2,010,112K除以1024来将Runtime.getRuntime().maxMemory()的结果转化成MB,看看我算的是不是有问题。你算出来的结果应该是1963M,与2048M就差了85M。

    查找原因

    在复现了问题之后,我还注意到有这么个现象——使用不同的GC算法结果也会不同:

    GC algorithm   Runtime.getRuntime().maxMemory()
    -XX:+UseSerialGC   2,027,264K
    -XX:+UseParallelGC 2,010,112K
    -XX:+UseConcMarkSweepGC    2,063,104K
    -XX:+UseG1GC   2,097,152K

    只有G1算法是真正使用了我配置好的2G内存,其它的GC算法都会或多或少的丢了点内存。

    那么现在该看下JVM的代码才行了,我在CollectedHeap的源码中发现了这么一段代码 :

    // Support for java.lang.Runtime.maxMemory():  return the maximum amount of
    // memory that the vm could make available for storing 'normal' java objects.
    // This is based on the reserved address space, but should not include space
    // that the vm uses internally for bookkeeping or temporary storage
    // (e.g., in the case of the young gen, one of the survivor
    // spaces).
    virtual size_t max_capacity() const = 0;

    不得不说这实在是太隐蔽了。不过线索还是有的,只有那些真正好奇的人才能发现——真相就是在计算堆大小的时候,其中的一个存活区在某些情况下可能会被排除在外。

    这之后的事情就比较简单了——打开GC日志后我们可以发现,在2G的堆下,Serial, Parallel以及CMS算法所设置的存活区的大小都恰好是内存缺失的这部分。比如说,上例中的这个ParallelGC的GC日志是这样的:

    Running with: [-Xms2g, -Xmx2g, -XX:+UseParallelGC, -XX:+PrintGCDetails]
    Runtime.getRuntime().maxMemory(): 2,010,112K.
    
    ... rest of the GC log skipped for brevity ...
    
     PSYoungGen      total 611840K, used 524800K [0x0000000795580000, 0x00000007c0000000, 0x00000007c0000000)
      eden space 524800K, 100% used [0x0000000795580000,0x00000007b5600000,0x00000007b5600000)
      from space 87040K, 0% used [0x00000007bab00000,0x00000007bab00000,0x00000007c0000000)
      to   space 87040K, 0% used [0x00000007b5600000,0x00000007b5600000,0x00000007bab00000)
     ParOldGen       total 1398272K, used 1394966K [0x0000000740000000, 0x0000000795580000, 0x0000000795580000)

    从中可以发现Eden区的大小是524,800K,两个存活区是87,040K,而老生代的大小是1,398,272K。将Eden区以及老生代,再加上一个存活区的大小,正好就是2,010,112K,也就是说缺失的这85M或者说87,040K,的确就是剩下的那一个存活区。

    总结

    读完ITJS的这篇文章后你会对Java API的实现有一个新的认识。如果下次JVM工具将可用堆的总内存可视化时比-Xmx中配置的要小了那么一点点的话,你就知道这是少了其中的一个存活区了。

    当然我也承认,这在日常的开发工作中并没有什么实际用途,但这并不是ITJS的这篇文章的重点。事实上,ITJS的这篇文章想说的是,通常来说,我认为一名优秀的工程师应该具备的一个特征就是——好奇心。一个优秀的工程师应当时刻保持着一探究竟的热情。有时候答案可能很隐蔽,但我还是建议你尝试去把它找出来。你这一路所收获到的知识最终一定会回馈给你的。

    上一篇返回首页 下一篇

    声明: 此文观点不代表本站立场;转载务必保留本文链接;版权疑问请联系我们。

    别人在看

    Destoon 模板存放规则及语法参考

    Destoon系统常量与变量

    Destoon系统目录文件结构说明

    Destoon 系统安装指南

    Destoon会员公司主页模板风格添加方法

    Destoon 二次开发入门

    Microsoft 将于 2026 年 10 月终止对 Windows 11 SE 的支持

    Windows 11 存储感知如何设置?了解Windows 11 存储感知开启的好处

    Windows 11 24H2 更新灾难:系统升级了,SSD固态盘不见了...

    小米路由器买哪款?Miwifi热门路由器型号对比分析

    IT头条

    Synology 对 Office 套件进行重大 AI 更新,增强私有云的生产力和安全性

    01:43

    StorONE 的高效平台将 Storage Guardian 数据中心占用空间减少 80%

    11:03

    年赚千亿的印度能源巨头Nayara 云服务瘫痪,被微软卡了一下脖子

    12:54

    国产6nm GPU新突破!砺算科技官宣:自研TrueGPU架构7月26日发布

    01:57

    公安部:我国在售汽车搭载的“智驾”系统都不具备“自动驾驶”功能

    02:03

    技术热点

    最全面的前端开发指南

    Windows7任务栏桌面下角的一些正在运行的图标不见了

    sql server快速删除记录方法

    SQL Server 7移动数据的6种方法

    SQL Server 2008的新压缩特性

    每个Java程序员必须知道的5个JVM命令行标志

      友情链接:
    • IT采购网
    • 科技号
    • 中国存储网
    • 存储网
    • 半导体联盟
    • 医疗软件网
    • 软件中国
    • ITbrand
    • 采购中国
    • CIO智库
    • 考研题库
    • 法务网
    • AI工具网
    • 电子芯片网
    • 安全库
    • 隐私保护
    • 版权申明
    • 联系我们
    IT技术网 版权所有 © 2020-2025,京ICP备14047533号-20,Power by OK设计网

    在上方输入关键词后,回车键 开始搜索。Esc键 取消该搜索窗口。