如何证明两组样本有显著性差异？

134****9030

整体显著性

提问时间:2022-08-24 09:04:41

提示：以下回答均以本问题为中心，仅供参考；如需更多帮助，请咨询早鸽顾问。去咨询

回答 | 共1个

张强

从业11年

专利审查答复专利撰写

所在地区:深圳市

咨询解答:527

咨询TA

并非如此。统计检验只在乎整体分布有无差别，但并不保证对个体的预测性。举个简单的例子，如果有某个属性的群体成功率是40%，而剩余的没有这个属性的群体成功率是60%。统计检验也许非常显著，但是单独看这个属性，并无法让你得到很高的预测准确度——你会对于有这个属性的样本预测其不会成功（60%正确），而对于有这个属性的样本预测其会成功（60%正确），这样你的准确率无论如何都只有60%。这是因为统计检验只在乎整体的分布，例如整体的成功率是否变高，而不在乎对于每一个个体的预测性。但是对于个体的预测性往往是机器学习的关注方向。一般而言，整体分布在不同属性中很大程度会有差异，即使这些差异非常微小。而统计检验只是说这些统计差异是否被显著的观察到。只要有差异，只要有足够多的样本，p值可以非常小，但是如果差别过小，对于预测一般没有帮助（例如51%和51.1%）。所以统计检验对机器学习模型的表现并没有很大的相关性。显著的统计检验不一定保证能够训练出表现很好的分类算法，但是如果机器学习算法表现的很好，那么必然有几类数据集合有比较大的差异。如果这个时候你没有在这些集合中观察到显著的差异，那你可能过拟合了。(? ? ?)?

2022-08-24 11:08:42

没有符合您的答案？立即联系 “在线顾问"

相关问答