草庐IT

java - 内存不足错误 : Java heap size when memory is available

coder 2023-06-04 原文

我正在使用 java -Xmx240g mypackage.myClass 运行 java

操作系统是 Ubuntu 12.10。

top 表示 MiB Mem 245743 total，并显示 java 进程从一开始就有 virt 254g，并且 res 稳步增加到 169g。那时看起来它开始垃圾收集很多，我认为是因为该程序是单线程的，并且 CPU% 大部分是 100% 最多此时，它在1300-2000左右跳跃(我断定它是多线程垃圾收集器)，然后res慢慢移动到172g。那时java崩溃了

线程“main”java.lang.OutOfMemoryError 中的异常:Java 堆空间

在 new double[2000][5]

的行

java -version 说

java 版本“1.7.0_15” OpenJDK 运行环境 (IcedTea7 2.3.7) (7u15-2.3.7-0ubuntu1~12.10) OpenJDK 64-Bit Server VM(build 23.7-b01，混合模式)

硬件为 Amazon cr1.8xlarge 实例

在我看来，即使有大量可用内存，java 也会崩溃。这显然是不可能的，我必须把一些数字解释错。我应该从哪里了解发生了什么？

编辑:

我没有指定任何 GC 选项。唯一的命令行选项是 -Xmx240g

我的程序成功地处理了许多输入，并且 top 有时说它使用了高达 98.3% 的内存。但是我用某些程序输入重现了上述情况。

编辑2:

这是科学应用。它有巨大的树(1-10 百万个节点)，在每个节点中有几个 double 数组，大小约为。 300x3 - 900x5。初始树创建程序后不会分配太多内存。大多数时候，这些数组都会进行一些算术运算。

编辑3:

HotSpot JVM 以同样的方式死机，在 170-172g 标记处大量使用 CPU，并因同样的错误而崩溃。看起来 70-75% 的内存是 JVM 不想跨越的一条神奇线。

最终解决方案: 使用 -XX:+UseConcMarkSweepGC -XX:NewRatio=12 程序通过了 170g 标记并且很高兴地进一步工作。

最佳答案

分析

您需要做的第一件事是获取堆转储，这样您就可以准确地计算出 JVM 崩溃时堆的样子。将这组标志添加到命令行:

-XX:+HeapDumpOnOutOfMemoryError -verbose:gc -XX:+PrintGCDetails

当发生崩溃时，JVM 会将堆写入磁盘。坦率地说，在这么大的堆上需要很长时间。下载 Eclipse MAT或者如果您已经在运行 Eclipse，请安装该插件。从那里，您可以加载堆转储并运行几个 jar 头报告。您需要检查 Leak Suspects 和 Dominator Tree 以查看您的内存去向并确定您没有实际的泄漏。

在那之后，我会推荐你​​read this document Oracle 关于垃圾收集的文章，但是您可以考虑以下几点:

并发 GC

-XX:+UseConcMarkSweepGC

我从未听说有人在这么大的堆上使用仅并行收集器而侥幸成功。您可以激活并发收集器，并且您需要阅读增量模式并确定它是否适合您的工作负载/硬件组合。

无堆率

-XX:MinHeapFreeRatio=25

当您进行完整收集时，将其调低以降低垃圾收集器的阈值。这可能会阻止您在执行完整收集时耗尽内存。 40% 是默认值，请尝试使用较小的值。

新比率

-XX:NewRatio

我们需要了解更多关于您的实际工作量的信息:这是一个网络应用吗？一个 Swing 应用程序？取决于对象在堆上保持 Activity 的时间长短，将对新的比率值产生影响。默认情况下，像您正在运行的服务器模式 VM 具有相当高的新比率 (8:1)，如果您有很多长生命周期对象，这可能不适合您。

关于java - 内存不足错误 : Java heap size when memory is available，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/16095439/

availablememorycode收集器sectionjava

有关java - 内存不足错误 : Java heap size when memory is available的更多相关文章

  1. ruby-on-rails - Ruby net/ldap 模块中的内存泄漏 - 2

    作为我的Rails应用程序的一部分，我编写了一个小导入程序，它从我们的LDAP系统中吸取数据并将其塞入一个用户表中。不幸的是，与LDAP相关的代码在遍历我们的32K用户时泄漏了大量内存，我一直无法弄清楚如何解决这个问题。这个问题似乎在某种程度上与LDAP库有关，因为当我删除对LDAP内容的调用时，内存使用情况会很好地稳定下来。此外，不断增加的对象是Net::BER::BerIdentifiedString和Net::BER::BerIdentifiedArray，它们都是LDAP库的一部分。当我运行导入时，内存使用量最终达到超过1GB的峰值。如果问题存在，我需要找到一些方法来更正我的代

  2. ruby-on-rails - Rails 常用字符串(用于通知和错误信息等) - 2

    大约一年前，我决定确保每个包含非唯一文本的Flash通知都将从模块中的方法中获取文本。我这样做的最初原因是为了避免一遍又一遍地输入相同的字符串。如果我想更改措辞，我可以在一个地方轻松完成，而且一遍又一遍地重复同一件事而出现拼写错误的可能性也会降低。我最终得到的是这样的:moduleMessagesdefformat_error_messages(errors)errors.map{|attribute,message|"Error:#{attribute.to_s.titleize}#{message}."}enddeferror_message_could_not_find(obje

  3. java - 等价于 Java 中的 Ruby Hash - 2

    我真的很习惯使用Ruby编写以下代码:my_hash={}my_hash['test']=1Java中对应的数据结构是什么？ 最佳答案 HashMapmap=newHashMap();map.put("test",1);我假设？ 关于java-等价于Java中的RubyHash，我们在StackOverflow上找到一个类似的问题： https://stackoverflow.com/questions/22737685/

  4. ruby-on-rails - 迷你测试错误 : "NameError: uninitialized constant" - 2

    我遵循MichaelHartl的“RubyonRails教程:学习Web开发”，并创建了检查用户名和电子邮件长度有效性的测试(名称最多50个字符，电子邮件最多255个字符)。test/helpers/application_helper_test.rb的内容是:require'test_helper'classApplicationHelperTest在运行bundleexecraketest时，所有测试都通过了，但我看到以下消息在最后被标记为错误:ERROR["test_full_title_helper",ApplicationHelperTest,1.820016791]test

  5. ruby-on-rails - 如何在 Rails View 上显示错误消息？ - 2

    我是rails的新手，想在form字段上应用验证。myviewsnew.html.erb.....模拟.rbclassSimulation{:in=>1..25,:message=>'Therowmustbebetween1and25'}end模拟Controller.rbclassSimulationsController我想检查模型类中row字段的整数范围，如果不在范围内则返回错误信息。我可以检查上面代码的范围，但无法返回错误消息提前致谢 最佳答案 关键是您使用的是模型表单，一种显示ActiveRecord模型实例属性的表单。c

  6. 使用 ACL 调用 upload_file 时出现 Ruby S3 "Access Denied"错误 - 2

    我正在尝试编写一个将文件上传到AWS并公开该文件的Ruby脚本。我做了以下事情:s3=Aws::S3::Resource.new(credentials:Aws::Credentials.new(KEY,SECRET),region:'us-west-2')obj=s3.bucket('stg-db').object('key')obj.upload_file(filename)这似乎工作正常，除了该文件不是公开可用的，而且我无法获得它的公共(public)URL。但是当我登录到S3时，我可以正常查看我的文件。为了使其公开可用，我将最后一行更改为obj.upload_file(file

  7. ruby-on-rails - 错误 : Error installing pg: ERROR: Failed to build gem native extension - 2

    我克隆了一个rails仓库，我现在正尝试捆绑安装背景:OSXElCapitanruby2.2.3p173(2015-08-18修订版51636)[x86_64-darwin15]rails-v在您的Gemfile中列出的或native可用的任何gem源中找不到gem'pg(>=0)ruby​​'。运行bundleinstall以安装缺少的gem。bundleinstallFetchinggemmetadatafromhttps://rubygems.org/............Fetchingversionmetadatafromhttps://rubygems.org/...Fe

  8. ruby - ＃之间？ Cooper 的 *Beginning Ruby* 中的错误或异常 - 2

    在Cooper的书BeginningRuby中，第166页有一个我无法重现的示例。classSongincludeComparableattr_accessor:lengthdef(other)@lengthother.lengthenddefinitialize(song_name,length)@song_name=song_name@length=lengthendenda=Song.new('Rockaroundtheclock',143)b=Song.new('BohemianRhapsody',544)c=Song.new('MinuteWaltz',60)a.betwee

  9. ruby-on-rails - 每次我尝试部署时，我都会得到 - (gcloud.preview.app.deploy) 错误响应 : [4] DEADLINE_EXCEEDED - 2

    我是Google云的新手，我正在尝试对其进行首次部署。我的第一个部署是RubyonRails项目。我基本上是在关注thisguideinthegoogleclouddocumentation.唯一的区别是我使用的是我自己的项目，而不是他们提供的“helloworld”项目。这是我的app.yaml文件runtime:customvm:trueentrypoint:bundleexecrackup-p8080-Eproductionconfig.ruresources:cpu:0.5memory_gb:1.3disk_size_gb:10当我转到我的项目目录并运行gcloudprevie

  10. ruby-on-rails - Ruby 中的内存模型 - 2

    ruby如何管理内存。例如:如果我们在执行过程中采用C程序，则以下是内存模型。类似于这个ruby如何处理内存。C:__________________|||stack|||------------------||||------------------|||||Heap|||||__________________|||data|__________________|text|__________________Ruby:? 最佳答案 Ruby中没有“内存”这样的东西。Class#allocate分配一个对象并返回该对象。这就是程序

随机推荐