传统神经网络中常用的regularization方法
Posted xieb1994
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了传统神经网络中常用的regularization方法相关的知识,希望对你有一定的参考价值。
1、basic choice
(1)通过一定的方式来缩小权重
(2)通过一定的方式将部分权重置为0
(3)weight-elimination regulizer
2、Early Stoppping
Early stopping方法可以控制VC dimension的大小,具体可结合validation方法来实现。
以上是关于传统神经网络中常用的regularization方法的主要内容,如果未能解决你的问题,请参考以下文章