防止在读取大型文本文件时超出堆

Question

我正在写一个小程序，可以处理大的（最多无限个）文本文件。处理过程将相当简单（将部分内容修剪并处理成单独的字符串，然后打印出来）。然而，由于数据的长度可能是无限的，我可能会遇到超过堆的问题。我想到的第一个解决方案是使用流来处理数据。然而，Files类中的lines（）方法只能将文本分成行。我的线条也可以无限长！

我遇到的另一个解决方案是使用scanner useDelimiter方法：

Scanner input=new Scanner("file.txt");
input.useDelimiter(" "); 

while(input.hasNext()){
  System.out.println(input.next());
} 

这种方法会阻止Java一次读取所有文件，实际上允许我逐字处理文件而不超过堆吗？

Java中是否有一些更有效的解决方案（对于初学者来说不是太复杂）？

Answer 1

我试图模拟您的堆错误，但无法。使用我可以生成的数据，您的方法也可以正常工作。

然而，如果您正在寻找一种基于流的方法，那么这应该是可行的<代码>扫描仪。tokens（）提供一个流

try( Scanner input = new Scanner( new File( "file.txt" ) ); ){
    input.useDelimiter( " " );
    input.tokens().forEach( m -> System.out.println( m ) );
}
catch( FileNotFoundException e ){
    e.printStackTrace();
}