梯度传播的连乘效应可视化
观察多层梯度连乘如何导致消失或爆炸
∂L/∂W₁ = ∂L/∂a_L × ∏(σ'(zᵢ)·Wᵢ)
连乘链
对数尺度
层数:
10
因子:
0.5
↻ 重置