如何在postgreSql中使用JDBCTemboard BatchUpdate捕获错误记录？

Question

我正在使用Spring JDBCTemboard和BatchPREaredStatementSetter在postgreSql DB上执行批处理更新。我想捕获错误的记录，在浏览了一些帖子后，发现捕获BatchUpdateExctive，然后寻找“语句”。EXECUTE_FAILED可以帮助我识别错误的记录。然而，当我按照下面的方式实现它时，我从来没有得到过BatchUpdate异常。

在这里，我试图反复输入相同的id“120”，以便获得唯一的约束冲突，从而在db级别强制执行异常。

@Override
@Transactional
public void batchInsertTenantPayloads(List<Payload> payloadMessages) {

    try {
        jdbcTemplate.batchUpdate(DBQueryConstants.INSERT_INTO_MESSAGE_METERING_PAYLOAD, new BatchPreparedStatementSetter() {

            @Override
            public int getBatchSize() {
                return payloadMessages.size();
            }

            @Override
            public void setValues(PreparedStatement ps, int i) throws SQLException {
              
                ps.setLong(1, 120);
                ps.setString(2, payloadMessages.get(i).getId());
                ps.setDate(3, Date.valueOf(payloadMessages.get(i).getTs().toLocalDate()));
                ps.setString(4, payloadMessages.get(i).getContent().getId());
                ps.setInt(5, payloadMessages.get(i).getStatus().ordinal());
                ps.setString(6, MyUtils.toJSON(payloadMessages.get(i)));
            }
        });

    } catch (Exception e) {
        if (e.getCause() instanceof BatchUpdateException) {
            LOGGER.info("Batch exception occurred");
            BatchUpdateException be = (BatchUpdateException) e.getCause();
            int[] batchUpdateCounts = be.getUpdateCounts();
            for (int index = 0; index < batchUpdateCounts.length; index++) {
                if (batchUpdateCounts[index] == Statement.EXECUTE_FAILED) {
                    LOGGER.error(
                            "[MMC] batch update Error execution >>>>>>>>>>>" + index + " --- , codeFail : " + batchUpdateCounts[index]
                                    + "---, line " + payloadMessages.get(index));
                }
            }

        }

    }

}

挑战在于我从未进入BatchUpdateException块。相反，我得到了一个

组织。springframework。刀。重复键异常

嵌套的异常是

组织。postgresql。util。PSQLException:错误：重复的键值违反了唯一约束“message_metering_payload_pkey”

我可以做些什么不同的事情，以便捕获batchUpdate异常，只获取错误行并提交好的行。

我的批量是500。Postgre版本是9.6，我使用Spring2.0和SpringJDBC5.1.3。

stacktrace看起来像这样

org.springframework.dao.DuplicateKeyException: PreparedStatementCallback; SQL [insert into message_metering_payload(id,tenant_name,source_dt,exchange_id,status,payload)values(?,?,?,?,?,?)]; ERROR: duplicate key value violates unique constraint "message_metering_payload_pkey"
  Detail: Key (id)=(120) already exists.; nested exception is org.postgresql.util.PSQLException: ERROR: duplicate key value violates unique constraint "message_metering_payload_pkey"
  Detail: Key (id)=(120) already exists.
    at org.springframework.jdbc.support.SQLErrorCodeSQLExceptionTranslator.doTranslate(SQLErrorCodeSQLExceptionTranslator.java:242)
    at org.springframework.jdbc.support.AbstractFallbackSQLExceptionTranslator.translate(AbstractFallbackSQLExceptionTranslator.java:72)
    at org.springframework.jdbc.core.JdbcTemplate.translateException(JdbcTemplate.java:1444)
    at org.springframework.jdbc.core.JdbcTemplate.execute(JdbcTemplate.java:632)
    at org.springframework.jdbc.core.JdbcTemplate.execute(JdbcTemplate.java:646)
    at org.springframework.jdbc.core.JdbcTemplate.batchUpdate(JdbcTemplate.java:936)

Answer 1

您不会得到BatchUpdateException，因为您可能会在jdbcTemplate中使用SQLErrorCodeExceptionTranslator，它以特殊方式处理BatchUpdateExceptions：

if (sqlEx instanceof BatchUpdateException && sqlEx.getNextException() != null) {
    SQLException nestedSqlEx = sqlEx.getNextException();
    if (nestedSqlEx.getErrorCode() > 0 || nestedSqlEx.getSQLState() != null) {
        sqlEx = nestedSqlEx;
    }
}

有一个关于它的问题：

• jdbcTemplate.batchUpdate不返回BatchUpdateExctive的计数器

如果您使用SQLStateSQLExceptionTranslator，则可以缓解此问题：

jdbcTemplate.setExceptionTranslator(new SQLStateSQLExceptionTranslator());

然后你会得到BatchUpdateExctive作为原因：

try {
    // ...
} catch (DataAccessException e) {
    Throwable cause = e.getCause();
    logger.info("cause instanceof BatchUpdateException = {}", cause instanceof BatchUpdateException);
 }

但请注意，对于postgresql jdbc驱动程序BatchUpdateException#getUpdateCounts（）将仅包含EXECUTE_FAILED，尽管某些行可以成功插入。

看到这个问题了吗