k折交叉验证模型选择方法

Posted 2021-04-20

我想知道我们如何从k-fold交叉验证方法中选择模型。在k折交叉验证中，我们可以使用k模型的平均精度获得k个模型和精度分数。您能否提供一种从交叉验证中获得最终最佳模型的方法？

答案

K折交叉验证用于比较两种模型的性能，而不是建筑模型。比如说，我们设计了两个具有不同结构的2 seq2seq生成模型，我们的数据集很小，我们想选择一个模型。我们可以遵循k-fold交叉验证方法并获得每个模型的平均分数，并选择具有较高分数的优秀分数。

我们不需要从k模型中选择一个模型，但我们可以通过利用bagging（三种Ensemble方法之一）将k模块合二为一。有关更多信息，请参阅此博客：Bagging and Random Forest Ensemble Algorithms for Machine Learning。

参考： 1. https://stats.stackexchange.com/a/52277/103153 2. https://stats.stackexchange.com/a/19053/103153