JDBC中的批插入需要很长时间

Question

我试图在MSSQL中通过jdbc连接批量插入10K记录，批量插入大约需要18到20秒。我想在3秒内插入。有没有办法快速插入。

下面给出我的代码

public void BatchInsert() {
    PreparedStatement pStmnt = null;
  try {
     final int batchSize = 1000;
     int count = 0;
     Connection con = createConnection();
     long end = System.currentTimeMillis();
     System.out.println("connection creation time :: " + (end - start));
     start = System.currentTimeMillis();
     pStmnt = con.prepareStatement("insert into testtable values(?)");
     for (int i = 1; i <= 10000; i++) {
        pStmnt.setInt(1, i);
        pStmnt.addBatch();

       if (++count % batchSize == 0) {
          pStmnt.executeBatch();
       }
     }
     pStmnt.executeBatch(); // insert remaining records
     end = System.currentTimeMillis();
     System.out.println("total insert time :: " + (end - start));
 } catch (SQLException e) {
     e.printStackTrace();
 } finally {
     try {
       pStmnt.close();
     } catch (SQLException e) {
       e.printStackTrace();
     }
 }
    }

提前谢谢你的帮助。

Answer 1

如果您的连接默认为自动提交模式，那么您可以通过以下方式获得性能的显著提高

con.setAutoCommit(false);

在进入循环之前，添加批处理，然后执行

con.commit();

在最后一个执行包之后。

Answer 2

据我所知，您在数据库表中使用了更多的索引。这就是为什么它需要更多的时间。因此，在插入大小写时，首先您需要以某种方式停止索引（可能是删除和重新创建或删除不必要的索引）。

出于操作目的，您可以从testtable中删除所有索引，然后运行批处理。希望您能获得最短的插入时间。

1. 索引越多，插入越慢-使用索引，卢克
2. 基本原理：通过删除未使用的索引来提高插入和更新性能

1. 在执行INSERT之前，禁用触发器并删除外键。
2. 执行INSERT设置触发器通常设置的字段，并确保FK列的值有效。
3. 重新启用触发器，并使用NOCHECK重新创建外键。

归功于@RBarryYoung

1. SQL服务器插入巨大的表很慢