如何在Java并行程序中获得理想数量的线程？

Question

我需要在批处理程序中获得理想数量的线程，该程序在支持并行模式的批处理框架中运行，例如Spring Batch中的并行步骤。

据我所知，太多的线程无法执行程序的步骤是不好的，这可能会对程序的性能产生负面影响。某些因素可能会导致性能下降（使用共享资源（锁定，同步..）时的上下文切换，竞争条件…（还有其他因素吗？）。

当然，获得理想线程数的最好方法是对我进行实际的程序测试，以调整程序的线程数。但是在我的情况下，进行实际测试并不容易，因为测试需要很多东西（人员，测试计划，测试数据等），这对于我现在来说太难了。因此，在获得实际html" target="_blank">测试之前，我想尽可能地了解获得程序的理想线程数量的方法。我应该考虑什么才能获得程序的理想线程数（步数）？CPU核心数？运行我的程序的计算机上的进程数？数据库连接数？？在这种情况下是否存在诸如公式的合理方式？

Answer 1

最重要的考虑因素是您的应用程序/计算是CPU约束还是IO约束。

• 如果是IO受限的（单个线程将大部分时间都花在等待外部资源，例如数据库连接，文件系统或其他外部数据源上），那么您可以分配（许多）线程数多于可用处理器的数量-当然，有多少还取决于外部资源的扩展能力-本地文件系统，可能性不大。
• 如果（主要是）CPU限制，那么最好是稍微超过可用处理器的数量。