使用ResultSet从Oracle DB查询时的OutOfMemoryError

Question

我的查询返回31,000个结果，每行12列，每行包含大约8,000个字符（每行8KB)。以下是我的处理方式：

public List<MyTableObj> getRecords(Connection con) {
    List<MyTableObj> list = new ArrayList<MyTableObj>();
    String sql = "my query..."; 

    ResultSet rs = null;
    Statement st = null;

    con.setAutoCommit(false);
    st = con.createStatement(ResultSet.TYPE_FORWARD_ONLY, ResultSet.CONCUR_READ_ONLY);
    st.setFetchSize(50);
    rs = st.executeQuery(sql);

    try {
        System.out.println("Before MemoryFreeSize = " + (double)Runtime.getRuntime().freeMemory() / 1024 / 1024 + " MB");

        while ( rs.next() ) {
            MyTableObjitem item = new MyTableObj();
            item.setColumn1( rs.getString("column1") );
            ... ...
            item.setColumn12( rs.getString("column12") );

            list.add( item );
        } // end loop

        // try to release some memory, but it's not working at all
        if ( st != null ) st.close();
        if ( rs != null ) rs.close();
        st = null; rs = null;
    }
    catch ( Exception e ) { //do something }
    System.out.println("After MemoryFreeSize = " + (double)Runtime.getRuntime().freeMemory() / 1024 / 1024 + " MB");

    return list;
} // end getRecords

如果每行占用8KB内存，31K应该占用242MB内存。在finish循环查询结果后，我的剩余内存只有142MB，不足以完成其他进程的其余部分。

让我们假设我不能改变数据库的设计，我需要所有的查询结果。处理后如何释放更多内存？

另外：我还尝试不使用resultset.getstring()并使用hardcode字符串重新使用它，在循环之后，我得到了450MB的空闲内存。

我发现，如果我这样做了：

// + counter to make the value different for each row, for testing purpose
item.setColumn1( "Constant String from Column1" + counter );
... ...
item.setColumn12( "Constant String from Column12" + counter );
counter++;

item.setColumn1( rs.getString("column1") );
... ...
item.setColumn12( rs.getString("column12") );

Answer 1

您应该缩小您的查询范围，尽量使其更加具体，如果有必要，在您的查询中添加限制您的java不能处理太大的结果