如何证明统计显著性，python

Question

我是统计学方面的新手，如果您能给我一些见解，我将不胜感激：

我有两个大表--工作结果Model_1和model_2。我创建并计算了统计数据--比如精度=真阳性/（真阳性+假阳性），并假设第一个模型比第二个模型好，因为Model_1中的比例比Model_2中的好。

如何从统计上证明？我有一个想法，使用bootstrap（或者只是我的两个初始样本中的随机样本），一遍又一遍地计算那里的度量，看看那个度量的分布是否正常。没事吧？

然后，如果正态性得到证明，那么就可以不对均值而对自定义比例使用t检验（如果不是，则使用Mann-Whitney检验）？理论上是的，但阅读标准功能手册：

scipy.stats.ttest_ind(...)[来源]计算两个独立样本分数均值的t检验。

好像都是手段问题。

谢谢！

Answer 1

这听起来像是您想要使用McNemar测试，它包含在成对的标称（布尔）数据中。

statsmodel库中似乎有一个python实现。另见本题。