矩阵求导_矩阵求导链式法则

矩阵求导_矩阵求导链式法则一、矩阵求导: 一般来讲,我们约定x=(x1,x2,x3….xn)的转置(分母布局,关于分子布局自行参考网上)。 下面介绍3种常见的矩阵求导 1、向量对向量求导 注释: Numerator layout : 分子布局 Denominator layout : 分母布局 《多元统计分析》

一、矩阵求导:

     一般来讲,我们约定x=(x1,x2,x3….xn)的转置(分母布局,关于分子布局自行参考网上)。

    下面介绍3种常见的矩阵求导

1、向量对向量求导 

       注释: Numerator layout : 分子布局

                  Denominator layout : 分母布局

                《多元统计分析》课堂,按照分子布局来讲。

这里写图片描述

2、标量对向量求导

这里写图片描述
这里写图片描述

3、向量对标量求导

这里写图片描述

二、几种重要的矩阵(参见我另一篇博客:https://www.cnblogs.com/cy0628/p/13815909.html

1、梯度(Gradient)

这里写图片描述
这里写图片描述

2、雅克比矩阵(Jacobian matrix)

这里写图片描述
这里写图片描述

3、海森矩阵(Hessian matrix)

这里写图片描述

三、常用的矩阵求导公式

这里写图片描述
这里写图片描述

另外:我觉得知乎上某人写的挺好,现给出链接供参考:https://zhuanlan.zhihu.com/p/24709748

书籍推荐:The matrix cookbook (矩阵计算)pdf版本,适合矩阵求导和计算,下载链接:https://pan.baidu.com/s/1CzVIct_1J1pOkOIWW2o_7w

 

参考文献:The matrix cookbook 

                  https://www.cnblogs.com/jiaxinwei/p/11450561.html

今天的文章矩阵求导_矩阵求导链式法则分享到此就结束了,感谢您的阅读,如果确实帮到您,您可以动动手指转发给其他人。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
如需转载请保留出处:https://bianchenghao.cn/53124.html

(0)
编程小号编程小号
上一篇 2023-08-30
下一篇 2023-08-30

相关推荐

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注