使用属性类加载地图

Question

我有一张75000个条目的地图，每个条目的值平均大小为10kb。

我使用Properties类将此映射加载到内存中。但是由于映射的大小，当主机上的RAM很小时，我会得到OutOfMemoryException。

我有一个选择，就是将条目成批（比如10000）读入内存，而不是加载完整的映射。在处理初始10k后读取下一个10k。

是否有任何方法可以使用Properties类来完成此任务。

此外，有没有更好的方法以这种方式加载地图条目？

感谢和问候，
Sujith

Answer 1

我假设您不需要同时加载所有属性，而是需要遍历所有属性。就我个人而言，我会逐行手动解析文件，并以流式方式工作。如果有一个用于处理非常大的属性的库，我不知道。

Answer 2

不要使用属性，这是遗产

>

按顺序读取每个文件，使用首选项加载和处理

示例代码：

package com.mypack.test;

import java.io.*;
import java.util.*;
import java.util.prefs.Preferences;

public class PreferencesExample {

    public static void main(String args[]) throws FileNotFoundException {
        Preferences ps = Preferences.userNodeForPackage(PreferencesExample.class);
        // Load file object
        File fileObj = new File("d:\\data.xml");
        try {
            FileInputStream fis = new FileInputStream(fileObj);
            ps.importPreferences(fis);
            System.out.println("Prefereces:"+ps);
            System.out.println("Get property1:"+ps.getInt("property1",10));

        } catch (Exception err) {
            err.printStackTrace();
        }
    }
}

xml示例：

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE preferences SYSTEM 'http://java.sun.com/dtd/preferences.dtd'>
<preferences EXTERNAL_XML_VERSION="1.0">
<root type="user">
<map />
<node name="com">
  <map />
  <node name="mypack">
    <map />
    <node name="test">
      <map>
        <entry key="property1" value="80" />
        <entry key="property2" value="Red" />
      </map>
    </node>
  </node>
</node>
</root>
</preferences>