我目前正在使用 JOGL (Java
OpenGL绑定)开发3D图形应用程序。简而言之,我有一个巨大的横向二进制文件。由于其大小,我必须在运行时流式传输地形块。因此,我们明确看到了随机访问问题。我已经完成了第一个(也很肮脏的)实现(也许是多线程的),在这里我使用的是愚蠢的方法……这是它的初始化:
dataInputStream = new DataInputStream(new BufferedInputStream(fileInputStream,4 * 1024);
dataInputStream.mark(dataInputStream.available());
当我需要读取(流式)特殊块时(我已经知道文件中的“偏移量”),我正在执行以下操作(让我感到羞耻:)):
dataInputStream.reset();
dataInputStream.skipBytes(offset);
dataInputStream.read(whatever I need...);
由于我很少有经验,这是我首先想到的:)因此,到目前为止,我已经阅读了3篇有用且非常有趣的文章(建议您阅读,也许您对此主题感兴趣的话)
字节缓冲区和非堆内存-Gregory 先生似乎精通Java NIO。
Java技巧:如何快速读取文件 [http://nadeausoftware.com/articles/2008/02/java_tip_how_read_files_quickly]-这是一个有趣的基准。
文章:调整Java I / O性能 [http://java.sun.com/developer/technicalArticles/Programming/PerfTuning/]-简单的Sun建议,但是请向下滚动并查看其中的“ Random Access”部分;它们显示了RandomAccessFile(RAF)的简单实现,并具有自我缓冲功能。
Gregory先生在文章结尾提供了几个* .java文件。其中之一是在FileChannel + ByteBuffer
+映射(FBM)和RAF之间进行基准测试。他说,他注意到使用FBM的速度是RAF的4倍。我已经在以下条件下运行了该基准测试:
结果是惊人的:
皇家空军〜28秒! FBM〜0.2秒!
但是,他在该基准测试中对RAF的实现没有自我缓冲(第三篇文章讲述了这一点),因此我猜想它是“
RandomAccessFile.seek”方法调用,它使性能如此下降。
好的,在我了解了所有这些事情之后,现在有1个问题和1个难题:)
问题 :当我们使用“
FileChannel.html" target="_blank">map”映射文件时,Java是否将整个文件内容复制到MappedByteBuffer中?还是只是模仿它?如果复制,那么使用FBM方法不适合我的情况,对吗?
困境 :取决于您对问题的回答…
如果映射复制了一个文件,那么看来我只有2种可能的解决方案: RAF +自缓冲 (第3条中的一种)或 利用FileChannel中的位置 (不用于映射)…哪一个可以会更好?
如果映射不能复制文件,那么我有3个选择:前两个选择和 FBM本身 。
编辑
:这是另一个问题。在座的一些人说映射不会将文件复制到MappedByteBuffer中。好的,那我为什么不能映射1GB的文件,却收到“无法映射”消息…
PS 我希望收到与建议一个满足的答案,因为我无法找到过这个话题在互联网上一致的信息。
谢谢 :)
否,数据未缓冲。MappedByteBuffer使用指针引用数据。换句话说,数据不会被复制,只是
被映射
到物理内存中。如果还没有,请参阅API文档。
内存映射文件是虚拟内存的一部分,已为其分配了与文件或类似文件的资源的某些部分的逐字节直接相关性。此资源通常是物理上存在于磁盘上的文件,但也可以是设备,共享内存对象或操作系统可以通过文件描述符引用的其他资源。一旦存在,文件和内存空间之间的这种关联关系允许应用程序将映射部分视为主内存。
资料来源:维基百科
如果您要经常读取数据,则最好至少缓存其中一些数据。
问题内容: 我有一个包含文件夹结构的zip文件,例如 主文件夹/ subFolder1 / subFolder2 / subFolder3 / 文件3.1 文件3.2 我想使用Java 重命名文件夹,例如在该zip文件中。 有没有比提取整个zip文件并使用新的文件夹名称重新创建一个新的方法更简单的方法? 问题答案: Zip是一种存档格式,因此变异通常涉及重写文件。 zip的某些特殊功能也会受阻(z
问题内容: 我正在从另一个应用程序内部运行一个应用程序以进行测试。我想将经过测试的应用程序的输出重定向到一个文件,因此每次测试后都可以有一个日志。 有没有一种方法可以将应用程序的输出从java中的命令行重定向到文件? 问题答案: 你可以使用Windows命令行* nix shells支持的输出流重定向器,例如 另外,当你从vm内部运行应用程序时,可以从java本身内部进行重定向。你可以使用方法 S
问题内容: 我使用巨大的数据文件,有时我只需要知道这些文件中的行数,通常我会打开它们并逐行读取它们,直到到达文件末尾 我想知道是否有更聪明的方法可以做到这一点 问题答案: 这是我到目前为止找到的最快的版本,比readLines快6倍。在150MB的日志文件上,这需要0.35秒,而使用readLines()则需要2.40秒。只是为了好玩,Linux的wc -l命令需要0.15秒。 编辑,在9 1/2
问题内容: 如何将转换为? 问题答案: 这取决于最适合您的方式。明智地提高生产力,不要重蹈覆辙,而是使用Apache Commons。在哪。
问题内容: 我创建了一个Java applet(.class文件),并用它制作了一个.jar并对该.jar文件进行了数字签名。现在我需要将.jar作为小程序运行在Firefox中。我要在html代码中放入什么以将.jar文件作为applet运行?我尝试了一下,但它不起作用,它尝试获取.class文件,如何使用Internet Explorer和Firefox中的applet标签将applet加载并
在我的spring应用程序中,我试图使用 该文件是在临时目录下的Tomcat环境中正确创建的。 但是,将其部署到websphere时,java尝试写入的路径是 C:\Program Files\IBM\WebSphere\AppServer_1\配置文件\AppSrv01\temp\WIN7VSNode04\server1\Application\application.war\C:\Progra