如何在visual studio负载测试中计算95%的响应时间

Question

在分析VSTS负载测试报告时，我们发现endpoint的响应时间如下

• 平均响应时间 ：- 0.68
• 90% 响应时间 ：- 1.18
• 95% 响应时间 ：- 1.34
• 99% 响应时间 ：- 1.68

采样率按照VSTS的建议设置为15秒（当我们设置为低于15秒时，我们会收到警告）。我们使用VSTS云产品来生成负载。

在性能图表（结果）中，显示的响应时间峰值约为0.7秒，高于0.7秒。当我们下载样本时，我们看到所有条目（每15秒1个条目）都与图表上绘制的数据匹配，并且小于0.7秒。

我们的SLA是95%支持1秒。现在我们无法理解

1. 如何计算90%、95%和99%的响应时间（使用什么数据）
2. 我们如何获得有关占95%响应时间的请求的更多数据，以便进行调试

Answer 1

对于每个不同的计数器，在每个采样间隔中生成一个值，该值显示在图形上。因此，图表似乎经常省略峰值。结果表收集所有值，响应时间的百分位数是通过排除最慢的值来计算的。如果总共收集 N 个响应时间，则第 90 个百分位将排除这些 N 次中最慢的 10%，与其他百分位数类似。要了解响应时间的范围，请比较和对比这些值：

• 百分位数。
• 平均值。但请记住，平均值可能会被一些非常大或非常小的值扭曲。
• 中位数。它是通过排除几乎一半的最慢值和相同数量的最快值来找到的。
• 最小值和最大值

微软有几个关于分析负载测试结果的网页。这个页面是一个开始。对site：microsoft.com分析负载测试结果等术语的网络搜索应该会找到更多细节。

百分位值由SQL存储过程计算，可以通过浏览负载测试数据库找到。在我的Windows 10计算机上，它位于文件中：C：\User\AdrianHHH\LoadTest2010.mdf和C：\User\AdrianHHH\LoadTest2010_log.ldf。这些过程也显示在负载测试数据库创建脚本中，该脚本应该在C：\Program Files\Microsoft Visual Studio 11.0\Common 7\IDE\loadtestresultsrepository.sql中（但更改11.0以反映您的Visual Studio版本）。