ZJ-back propagation在全连接神经网络中的数学计算

http://home.agh.edu.pl/~vlsi/AI/backp_t_en/backprop.html 本文介绍了如何通过建立的loss，进一步追寻到神经网络中的所有node的loss值。通过其中任一个node的loss值、生成该node的原始权重值w、权重连接到的上层的那个node输出、学习率η、该node的激活函数的导数值，来更新获取新的权重值w。