不妨设神经网络的优化目标为:. [公式]. SGD. 那么,优化算法SGD可以写成:. [公式]. 理论上的SGD +Momentum. SGD +Momentum(动量)可以写成:. [公式].
確定! 回上一頁