批量插入大量数据到数据库

Question

我创建了一个向MySql数据库插入数百万个值的程序。我读到过有关批插入的文章，它将优化我的程序并使其更快，但当我尝试这样做时，它以同样的方式工作。我没有将每个值插入数据库，而是每次将500个值保存在一个列表中，然后将它们插入一个大循环中，如下所示：

for(int i=0;i<500;i++)
{
   insertData(list.get(i));
}

然后我删除列表中的所有值，并再次开始收集500个值。它不应该工作得更好吗？
我的插入代码是：

public void insertToNameTable(String id,String name) throws SQLException
       {
           PreparedStatement ps=null;

            ps= conn.prepareStatement("INSERT INTO NameTable values(?,?,?)",user.getId(),user.getName());


            ps.setString(1,id);
            ps.setString(2,name);
            ps.setBoolean(3,false);
            ps.executeUpdate();

       }

我有一些问题：
1。为什么当我批量插入时它不能更快地工作
2。为了加快速度，我每次应该输入多少值？（500100010000）一起输入的值越多越好
3。我向数据库中插入值的方式是最好的方式吗

Answer 1

问题1

用户尼尔·科菲不久前说：

认为事先准备好的声明主要是关于html" target="_blank">性能的，这是一种误解，尽管这是一种很常见的误解。

另一张海报提到，他注意到Oracle和SQL Server的速度提高了约20%。我注意到MySQL也有类似的数据。事实证明，解析查询并不是所涉及工作的重要部分。在一个非常繁忙的数据库系统上，还不清楚查询解析是否会影响总体吞吐量：总体而言，它可能只会占用CPU时间，否则当数据从磁盘返回时，CPU时间将处于空闲状态。

因此，作为使用预处理语句的一个原因，针对SQL注入攻击的保护远远超过了性能改进。如果你不担心SQL注入攻击，你可能应该。。。

以下是原始帖子：
准备好的声明和表现
在我看来，所有答案都值得一读。我认为你期望PreparedStatement成为某种魔术师，可以显著提高插入速度，这就是为什么你对自己的进步感到失望<问题3：
使用PreparedStatement的正确方法是准备一条语句，然后在循环中设置值和更新数据库。下面是一个很好的例子：多次重用PreparedStatement

Answer 2

这是批量插入的有效方法。

Connection connection = new getConnection();
Statement statement = connection.createStatement();
 
for (String query : queries) {
    statement.addBatch(query);
}
statement.executeBatch();
statement.close();
connection.close();