从文本文件中读取巨大的字符串行

Question

我有一个很大的文本文件，但是没有换行符。它只包含一个很长的字符串（包含所有ASCII字符的1行巨大的字符串），但是到目前为止一切正常，因为我可以将整行读入Java的内存中，但是我想知道是否有内存由于文件变得如此之大（如5GB
+），并且程序无法一次将整个文件读入内存，因此出现泄漏问题，那么在那种情况下，读取此类文件的最佳方法是什么？我们可以将巨大的线条分成2个部分，甚至多个块吗？

这是我读取文件的方式

   BufferedReader buf = new BufferedReader(new FileReader("input.txt"));
   String line;
   while((line = buf.readLine()) != null){

   }

Answer 1

一个String只能有20亿个字符长，每个字符要使用2个字节，因此，如果您读取5 GB的行，则将使用10 GB的内存。

我建议您分块阅读文本。

Reader reader = new FileReader("input.txt");
try {
    char[] chars = new char[8192];
    for(int len; (len = reader.read(chars)) > 0;) {
        // process chars.
    }
} finally {
    reader.close();
}

无论文件大小如何，这都将使用大约16 KB。