python中训练集和测试集的问题

Question

想问下一份数据集，训练集和测试集标准化和做pca这两种情况下需要分开处理还是同时处理？
如果pca同时处理的话，测试集不就消失了吗？
求详细一点的讲解

Answer 1

一般来说训练集验证集和验证集和测试集标准化啥的都是需要的吧，训练集除了一些特殊的数据增强和其他两个不一样，验证集和测试集更注重于实际应用，只会做一滤波处理，大小变换之类的，不会有数据增强的东西在里面的。当然，归一化或者标准化啥的那是要一致的，不一致的话会导致结果的偏差
另外，你如果只有训练集和测试集，那么你的测试集就相当于验证集了。