创建结构化Jenkins失败测试报告

Question

目前的情况：

每周一早上我都会手动检查周末运行的Jenkins作业jUnit结果，使用Project Health插件我可以过滤时间框运行。然后我将此表复制粘贴到Excel中，并检查每个测试用例的输出日志，以查看失败的原因并记下失败的原因。每个周末在Excel中都有另一个选项卡。所有这些都使可追溯性成为一场噩梦，并导致耗时的体力劳动。

我在寻找什么(并希望在某种程度上已经存在):

存储我指定的所有作业的所有失败测试的数据库。它解析失败测试用例的输出日志，并根据一些正则表达式应用“标记”，例如，如果有关音频的测试失败，则应用“音频”。由于所有内容都在数据库中，因此我可以制作或使用可以随意应用过滤器的前端。

例如，如果我想在周末查看有关音频失败的所有测试（在多个作业和多次运行中），我可以运行一个查询，返回所有带有音频标签的条目。

我可以手动标记失败的测试和原因，以及编写我自己的前端，有没有办法（也许是Jengins API？）来获取失败的测试（jUnit格式和Jenkins插件）并自己创建这样的系统，如果它不存在？

Answer 1

您可能想看看couchdb统计数据。这远不是一个完美的配合，但至少似乎部分实现了你想要实现的目标。

Answer 2

一个好问题。不幸的是，在詹金斯中很难获得跨越多个工作的“元统计”。目前还没有现成的解决办法。

基本上，我认为有两种选择可以得到你想要的：

1. 对Jenkins内部数据进行后处理，以获得所需的统计数据
2. 动态地向数据库提供构建执行数据

第一个选项基本上意味着自动化您现在手动完成的任务。

• 您可以使用外部脚本（Python、Perl、...）来处理Jenkins内部数据（通过REST或CLI API，或直接读取磁盘数据）
• 或者您在内部运行Groovy脚本（这将更快、更强大）

这是最直接的方法。但是，根据您需要的统计数据以及您对数据持久性的要求，您可能想要...

第二种选择：更灵活，与Jenkins的内部数据存储完全分离。您可以通过以下方式实现它：

• 为您的所有作业引入Groovy构建后步骤
• 该脚本解析作业结果并将感兴趣的数据放入自定义的外部数据库中

从查询数据库中获得的统计数据。

通常，您会从第一个选项开始。一旦需求增长，您就会慢慢地迁移到第二种方式(例如，通过显式的后处理脚本收集内部数据，将其放入数据库，然后在其上运行查询)。您将希望尽可能缩短这个迁移阶段，因为它最终需要实现这两个选项。