深度学习的数学 (6)误差反向传播法必需的链式法则

1. 神经网络和复合函数

y = f(u), u = g(x)
嵌套结构的函数 f(g(x)) 称为 f(u) 和 g(x) 的复合函数。

在这里插入图片描述
在这里插入图片描述

2. 链式法则,复合函数求导公式

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2.1 三个函数的复合函数的链式法则
在这里插入图片描述

在这里插入图片描述

2.2. 多变量函数的链式法则

变量 z 为 u、 v 的函数,如果 u、 v 分别为 x、 y 的函数,则 z 为 x、 y的函数

在这里插入图片描述

z 关于 x 求导时,先对 u、 v 求导,然后与 z 的相应导数相乘,最后将乘积加起来
在这里插入图片描述

扫描二维码关注公众号,回复: 13760269 查看本文章

在三个以上的变量的情况下也同样成立
在这里插入图片描述

猜你喜欢

转载自blog.csdn.net/thefist11cc/article/details/123861325