在并行模式下使用maven-surefire-plugin时如何识别慢速单元测试？

Question

为了管理/减少构建时间，我想使用来确定在并行测试环境中哪些单元测试花费的时间最多maven-surefire-plugin。

我们正在使用JUnit（4.10）进行单元测试。我们使用maven（2.2.1- 我们使用的某些插件尚不支持maven
3）作为我们的主要构建工具，并使用maven-surefire-plugin（2.19）运行单元测试。

我们使用的是maven-surefire-plugin在并行模式，其中两个单独的方法在平行和单元测试类运行并行运行-这是非常重要的，因为它显著减少了构建单元测试时间。的maven- surefire-plugin配置.pom如下：

  <plugin>
    <groupId>org.apache.maven.plugins</groupId>
    <artifactId>maven-surefire-plugin</artifactId>
    <version>2.19</version>
    <configuration>
      <argLine>-Xmx2G -XX:MaxPermSize=1G -XX:-UseSplitVerifier</argLine>
      <failIfNoTests>false</failIfNoTests>
      <parallel>classesAndMethods</parallel>
      <useUnlimitedThreads>true</useUnlimitedThreads>
    </configuration>
  </plugin>

但是，其含义之一是，在控制台输出中，每个JUnit测试类所花费的时间就是该类中所有方法的合计时间。

例如，如果一个测试类有10个单元测试方法，每个方法要花1秒才能运行，那么该测试类要花大约1秒的时间运行（每个方法并行运行），但是输出将类似于：

运行com.package.QuickParallelTest测试运行：10，失败：0，错误：0，跳过：0，经过时间：10.0秒-在com.package.QuickParallelTest中

这使得很难在控制台输出中将其与具有10种单元测试方法的另一种测试类区分开，其中9种几乎立即运行，而1种几乎需要10秒才能运行。在这种情况下，测试类将花费大约10秒钟来运行（由于一种缓慢的测试方法），但maven- surefire-plugin控制台输出实际上是相同的：

运行com.package.SlowParallelTest测试运行：10，失败：0，错误：0，跳过：0，经过的时间：10.0秒-在com.package.SlowParallelTest中

理想情况下，我希望经过的时间表示测试类（并行运行）花费了多长时间，而不是指示分别运行方法所花费的总时间（就像单线程一样）。

因此，我的问题是：

1. 我是否缺少maven-surefire-plugin设置，所以打印摘要将显示每个类花费的时间，而不是方法的合计时间？
2. 这是中的已知“错误”（或“功能”）maven-surefire-plugin吗？（我检查了SureFire JIRA，但找不到类似的东西。）
3. 是否有其他方法可以让我确定哪些测试需要花费很长时间，因此最适合进行优化。

编辑：

我尝试使用一些其他配置设置。奇怪的是，在配置中添加以下内容.pom似乎会将控制台输出中经过的时间更改为运行测试类所花费的时间-
但是，（在我看来）这是违反直觉的，因为这些设置是默认设置：

    <configuration>
      ...
      <forkCount>1</forkCount>
      <reuseForks>true</reuseForks>
    </configuration>

Answer 1

将reportFormat条目添加到Maven
Surefire插件配置中并将其值设置为plain（而不是默认值brief）将为您提供每种方法所用的时间。

<build>
    <plugins>
        <plugin>
            <groupId>org.apache.maven.plugins</groupId>
            <artifactId>maven-surefire-plugin</artifactId>
            <version>2.19</version>
            <configuration>
                <argLine>-Xmx2G -XX:MaxPermSize=1G -XX:-UseSplitVerifier</argLine>
                <failIfNoTests>false</failIfNoTests>
                <parallel>classesAndMethods</parallel>
                <useUnlimitedThreads>true</useUnlimitedThreads>
                <reportFormat>plain</reportFormat>
            </configuration>
        </plugin>
    </plugins>
</build>

使用默认的reportFormat（brief）输出：

-------------------------------------------------------
 T E S T S
-------------------------------------------------------
Running com.sample.mocking.InternalServiceTestCase
Tests run: 4, Failures: 0, Errors: 0, Skipped: 0, Time elapsed: 0.241 sec - in com.sample.mocking.InternalServiceTestCase

输出plain值：

-------------------------------------------------------
 T E S T S
-------------------------------------------------------
Running com.sample.mocking.InternalServiceTestCase
Tests run: 4, Failures: 0, Errors: 0, Skipped: 0, Time elapsed: 0.187 sec - in com.sample.mocking.InternalServiceTestCase
test(com.sample.mocking.InternalServiceTestCase)  Time elapsed: 0.005 sec
mockTest(com.sample.mocking.InternalServiceTestCase)  Time elapsed: 0.17 sec
mockTestFailureTollerance(com.sample.mocking.InternalServiceTestCase)  Time elapsed: 0.007 sec
mockProcessfile(com.sample.mocking.InternalServiceTestCase)  Time elapsed: 0.003 sec

此选项可以为您提供有关测试和执行时间的更多详细信息。