近端梯度下降算法

Posted ryluo

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了近端梯度下降算法相关的知识，希望对你有一定的参考价值。

一、软阈值算法及推导：

技术分享图片

技术分享图片

二、近端投影与近端梯度下降

技术分享图片


技术分享图片

技术分享图片

技术分享图片

技术分享图片

以上推导是结合很多大佬博客整理的，如有侵权，请及时联系，将对其进行修改。


以上是关于近端梯度下降算法的主要内容，如果未能解决你的问题，请参考以下文章

Proximal Gradient Descent-近端梯度下降

随机梯度下降算法

机器学习梯度下降算法

梯度下降算法VS正规方程算法

什么是梯度下降优化算法？

梯度下降算法的原理是啥？