Java Buffered reader 堆空间不足

Question

我正在尝试解析一个非常大的文件(~1.2 GB)。文件的某些行大于允许的最大字符串大小。

        FileReader fileReader = new FileReader(filePath);
        BufferedReader bufferedReader = new BufferedReader(fileReader);

        while ((line = bufferedReader.readLine()) != null) {
              //Do something
        }

        bufferedReader.close();

错误:

Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
    at java.util.Arrays.copyOf(Arrays.java:3332)
    at java.lang.AbstractStringBuilder.expandCapacity(AbstractStringBuilder.java:137)
    at java.lang.AbstractStringBuilder.ensureCapacityInternal(AbstractStringBuilder.java:121)
    at java.lang.AbstractStringBuilder.append(AbstractStringBuilder.java:569)
    at java.lang.StringBuffer.append(StringBuffer.java:369)
    at java.io.BufferedReader.readLine(BufferedReader.java:370)
    at java.io.BufferedReader.readLine(BufferedReader.java:389)
    at sax.parser.PrettyPrintXML.format(PrettyPrintXML.java:30)

第 30 行:

while ((line = bufferedReader.readLine()) != null) {

任何人都可以针对这种情况提出任何替代方法吗？

Answer 1

您正在对没有行的文件使用readLine()。因此它尝试将整个文件作为单行读取。这无法扩展。

解决方案:不要。一次读取一个 block ，甚至一次读取一个字符:无论文件的未声明结构决定什么。