李老师-向求导法则.docVIP

我们总是习惯用 SKIPIF 1 0 等表示列向量，而 SKIPIF 1 0 表示行向量 矩阵、向量求导法则 李启才――很多来自网络 （1）行向量对元素求导 设 SKIPIF 1 0 是 SKIPIF 1 0 维行向量， SKIPIF 1 0 是元素，则 SKIPIF 1 0 。 排列方式：仍排成行 （2）列向量对元素求导 设 SKIPIF 1 0 是 SKIPIF 1 0 维列向量， SKIPIF 1 0 是元素，则 SKIPIF 1 0 。 排列方式：仍排成列 （3）矩阵对元素求导 设 SKIPIF 1 0 是 SKIPIF 1 0 矩阵， SKIPIF 1 0 是元素，则 SKIPIF 1 0 。 排列方式：仍排成矩阵 公式： SKIPIF 1 0 , SKIPIF 1 0 以上向量（矩阵）对标量（即元素）求导，即向量（矩阵）各元素分别对标量求导，求导后排列方式不变 （4）元素对行向量求导 设 SKIPIF 1 0 是元素， SKIPIF 1 0 是 SKIPIF 1 0 维行向量，则 SKIPIF 1 0 。 排列方式：仍排成行 （5）元素对列向量求导 设 SKIPIF 1 0 是元素， SKIPIF 1 0 是 SKIPIF 1 0 维列向量，则 SKIPIF 1 0 。 排列方式：仍排成列 （6）元素对矩阵求导 设 SKIPIF 1 0 是元素， SKIPIF 1 0 是 SKIPIF 1 0 矩阵，则 SKIPIF 1 0 。 排列方式：仍排成p*q矩阵 以上三种标量对向量或矩阵求导，将标量分别对向量或矩阵元素求导，求导后排列方式与向量或矩阵一致。 （7）行向量对列向量求导 设 SKIPIF 1 0 是 SKIPIF 1 0 维行向量， SKIPIF 1 0 是 SKIPIF 1 0 维列向量，则 SKIPIF 1 0 。 排列方式：将y的元素分别对x求导，按y排列方式排列（向量对标量求导），然后，展开对x的每个分量求导，按x的排列方式排列（标量对向量求导）。 （8）列向量对行向量求导 设 SKIPIF 1 0 是 SKIPIF 1 0 维列向量， SKIPIF 1 0 是 SKIPIF 1 0 维行向量，则 SKIPIF 1 0 。 排列方式：规则与（7）一致。 （9）行向量对行向量求导 设 SKIPIF 1 0 是 SKIPIF 1 0 维行向量， SKIPIF 1 0 是 SKIPIF 1 0 维行向量，则 SKIPIF 1 0 。 （10）列向量对列向量求导 设 SKIPIF 1 0 是 SKIPIF 1 0 维列向量， SKIPIF 1 0 是 SKIPIF 1 0 维列向量，则 SKIPIF 1 0 。 （11）矩阵对行向量求导 设 SKIPIF 1 0 是 SKIPIF 1 0 矩阵， SKIPIF 1 0 是 SKIPIF 1 0 维行向量，则 SKIPIF 1 0 。 （12）矩阵对列向量求导 设 SKIPIF 1 0 是 SKIPIF 1 0 矩阵， SKIPIF 1 0 是 SKIPIF 1 0 维列向量，则 SKIPIF 1 0 。 （13）行向量对矩阵求导 设 SKIPIF 1 0 是 SKIPIF 1 0 维行向量， SKIPIF 1 0 是 SKIPIF 1 0 矩阵，则 SKIPIF 1 0 。 （14）列向量对矩阵求导 设 SKIPIF 1 0 是 SKIPIF 1 0 维列向量， SKIPIF 1 0 是 SKIPIF 1 0