多个Spring批处理作业写入同一个平面文件

Question

我有几个不同的Spring批处理作业需要写入同一个平面文件。在平面文件中写入数据的顺序并不重要。这些批处理作业可能同时运行。

FlatFileItemWriter是否合适？我担心的是，如果多个作业同时尝试写入平面文件，数据可能会混合在一起。

Answer 1

您可以简单地用同步写入方法创建一个包装器。类似于这样：

public class SynchronizedWrapperWriter<T> implements ItemWriter<T>, ItemStream {

  private ItemWriter<T> itemWriter;
  private boolean isStream = false;

  /**
   * setzen des ItemWriter.
   */
  public void setItemWriter(ItemWriter<T> itemWriter) {
    this.itemWriter = itemWriter;
    if (itemWriter instanceof ItemStream) {
      isStream = true;
    }
  }

  @Override
  public void close() {
    if (isStream) {
      ((ItemStream) itemWriter).close();
    }
  }

  @Override
  public void open(ExecutionContext executionContext) {
    if (isStream) {
      ((ItemStream) itemWriter).open(new ExecutionContext());
    }
  }

  @Override
  public void update(ExecutionContext executionContext) {
  }

  @Override
  public synchronized void write(List<? extends T> items) throws Exception {
    itemWriter.write(items);
  }
}

Answer 2

正如@dardo写的FlatFileItemWriter不是线程安全的，所以您不能使用多个线程写入同一个文件。
与实现自定义锁定机制不同的解决方案可能是写入不同的文件并创建一个新的最后一步，该步骤将连接所有以前创建的文件。您可以重用您的原始作业（将文件块创建为步骤）将它们包装在一个Jobstep中

Answer 3

根据文档，它不是线程安全的。因此，如果有多个线程写入同一个文件，则必须实现自己的锁定机制。