矩阵求导术(上)

Posted panfengde

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了矩阵求导术(上)相关的知识,希望对你有一定的参考价值。

深度学习我认为最核心的被部分,是求导,更新的这个过程!

这里涉及的矩阵求导,我觉得很复杂,看了很多的方法,记忆法则,真的是越看越不懂!

清华那本书,也是太庞大了。

学习大佬这个矩阵求导术方法,矩阵求导,算法推理,真的是迎刃而解!非常的nice。

感谢大佬。

这里贴上图片,以防各种原因,丢失

原文知乎链接

技术分享图片

以上是关于矩阵求导术(上)的主要内容,如果未能解决你的问题,请参考以下文章

softmax求导/label_smoothing求导/知识蒸馏求导

[转载]机器学习中常用的矩阵求导公式

详解矩阵求导法则

详解矩阵求导法则

Matrix Derivative矩阵求导

机器学习里的数学:矩阵求导Ⅱ