java - Apache POI WorkFactory.Create(new File()) java.lang.OutOfMemoryError

Question

我正在尝试使用 apache POI 3.10 将 excel 文件 (xlsx) 加载到工作簿对象中。

我收到 java.lang.OutofMemoryError。

我在 JVM 上使用带有 -Xmx2g 参数的 Java 8。

当我运行程序时，所有 4 个核心(64 位系统)和我的 RAM(4GB)都已达到最大。

Excel 工作表有 43 列和 166,961 行，相当于 7,179,323 个单元格。

我使用 Apache POIs WorkBookFactory.create(new File)，因为它比使用 InputFileStream 使用更少的内存。

有人知道如何优化内存使用或创建工作簿的其他方法吗？

下面是我的测试Reader类，不要评判，它很粗糙并且包含调试语句:

import java.io.File;
import java.io.IOException;
import org.apache.poi.openxml4j.exceptions.InvalidFormatException;
import org.apache.poi.ss.usermodel.Workbook;
import org.apache.poi.ss.usermodel.WorkbookFactory;

public class Reader {

    private Workbook wb;

    public Reader(File excel) {
        System.out.println("CONSTRUCTOR");
        wb = null;
        try  {
            wb = WorkbookFactory.create(excel);
        } catch (IOException e) {
            System.out.println("IO Exception");
            System.out.println(e.getMessage());
        } catch (InvalidFormatException e) {
            System.out.println("Invalid Format");
            System.out.println(e.getMessage());
        }
    }

    public boolean exists() { return (wb != null); }

    public void print() {}

    public static void main(String[] args) {
        System.out.println("START PRG");
        //File f = new File("oldfilename.xls");
        File f = new File("filename.xlsx");
        System.out.println("PATH:" + f.getAbsoluteFile());
        if (!f.exists()) {
            System.out.println("File does not exist.");
            System.exit(0);
        }
        System.out.println("FILE");
        Reader r = new Reader(f);
        System.out.println("Reader");
        r.print();
        System.out.println("PRG DONE");
    }
}

Answer 1

显然加载 24mb 文件不应该导致 OOM...

乍一看，虽然Xmx设置为2G，但系统中实际上没有那么多可用内存。换句话说，操作系统和其他进程可能占用了 4G 物理内存中超过 2G 的空间!首先检查可用的物理内存。如果可用率低于预期，请尝试关闭其他一些正在运行的应用程序/进程。

如果情况并非如此，并且确实有足够的内存剩余，那么在不进行分析的情况下，很难确定真正的原因。使用分析工具检查 JVM 状态，首先与内存相关。你可以简单地使用 jconsole(因为它是 JDK 附带的)。 @参见this on how to activate JMX

连接后，检查与内存相关的读数，特别是内存空间下方的读数:

1. 老一代
2. 年轻一代
3. 烫发一代

监控这些空间，看看哪里出了问题。我认为这是一个独立的应用程序。如果部署在服务器上(作为 Web 或服务)，您可以考虑使用“-XX:NewRatio”选项来有效且高效地分配堆空间。 @查看调整相关详细信息here .