k折交叉验证选取准确率最高的结果可以吗

Question

求问大家，这是普遍认同的k折交叉验证定义：
将原始数据D随机分成K份，每次选择（K-1）份作为训练集，剩余的1份作为测试集。交叉验证重复K次，取K次准确率的平均值作为最终模型的评价指标。它可以有效避免过拟合和欠拟合状态的发生，K值的选择根据实际情况调节。
真实实验过程中，我将k设为5，并不断把五次结果append进列表。但是为什么一定要选取这几次结果准确率的平均值呢？我想输出准确率最高的那次结果，这样准确率相应也成为最高的，这是可取的吗？
求解答！

Answer 1

如你所说，它最终是一个模型的评价指标，用于评价模型的能力。

用k折交叉，是为了尽可能消除因为数据的划分带来的波动，选取平均结果很大程度上减小了因为某次数据划分失衡带来的误差；取极值其实是放大了这个误差。

用平均数选取的最优模型大概率是一个发挥稳定的选手，取极值选取的模型大概率是一个神经刀。

所以，一般情况是不可取的，除非你的使用场景就需要一个神经刀。