你即將離開本站

並前往https://www.cxyzjd.com/article/weixin_43318626/114600248

Dead ReLU Problem 神经元坏死现象_Loy Fan-程序员宅基地

Dead ReLU Problem(神经元坏死现象)假设某ReLu层的输入x\mathbf{x}x满足ReLU在负数区域被kill的现象叫做dead relu。ReLU在训练的时很“脆弱”。在x<0时，梯度为0。

確定！ 回上一頁

查詢 「Dead ReLU」的人也找了：

  1. Dead ReLU
    2.
  2. Sigmoid 缺點
    3.
  3. 激活函數
    4.
  4. ReLU 缺點
    5.
  5. Leaky ReLU
    6.
  6. Leaky ReLU 缺點
    7.
  7. zero-centered
    8.
  8. LeakyReLU
    9.