本次研究重點在於結構性剪枝,並選取了比較簡單的layer dropout來實踐驗證其有效性。參考論文:Reducing Transformer Depth on Demand with Structured Dropout ...
確定! 回上一頁