普通交叉验证(OCV)和广义交叉验证(GCV)

Posted tango1221

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了普通交叉验证(OCV)和广义交叉验证(GCV)相关的知识,希望对你有一定的参考价值。

普通交叉验证OCV

OCV是由Allen(1974)在回归背景下提出的,之后Wahba和Wold(1975)在讨论 了确定多项式回归中多项式次数的背景,在光滑样条背景下提出OCV。

 技术分享图片

技术分享图片

技术分享图片

 

Craven和Wahba(1979),Silverman(1985),Bates和其他人(1987),Wahba(1990)等人提出了所谓的GCV标准。

广义交叉验证的加权验证技术被用于协方差模型选择和参数估计。

The GCV funtion V(λ) is defined by :

 技术分享图片

具体详见(Spline models for observation data  的第四章介绍)

相关参考文献:

  1. Allen, David M. The Relationship Between Variable Selection and Data Agumentation and a Method for Prediction. Technometrics, Vol. 16, No. 1 (February, 1974), pp. 125-127

  2. Craven, Peter and Wahba, Grace. Smoothing Noisy Data with Spline Functions. Numerische Mathematik 31, (1979), pp. 377-403

  3. Efron, Bradley. How Biased Is the Apparent Error Rate of a Logistic Regression? Technical report no. 232. Department of Statistics, Stanford University (April 1985)

  4. Golub, Gene H., Heath and Grace Wahba. Generalized Cross-Validation as a Method for Choosing a Good Ridge Parameter. Technometrics, Vol. 21, No. 2 (May, 1979), pp. 215-223

 

以上是关于普通交叉验证(OCV)和广义交叉验证(GCV)的主要内容,如果未能解决你的问题,请参考以下文章

交叉验证

交叉验证

我是不是需要同时执行网格搜索(使用交叉验证)和交叉验证方法?

交叉验证、留一交叉验证、自助法

5倍交叉验证如何理解

机器学习交叉验证和网格搜索