adam優(yōu)化器默認(rèn)參數(shù)是什么 adam優(yōu)化器使用
Megamarket大市場跨境問答2025-07-048800
Adam優(yōu)化器是一種自適應(yīng)學(xué)習(xí)率優(yōu)化算法,其默認(rèn)參數(shù)如下:
- 學(xué)習(xí)率衰減系數(shù)(learning rate decay factor):0.9
- 動量項系數(shù)(momentum coefficient):0.99
- 權(quán)重衰減系數(shù)(weight decay coefficient):0.001
- 正則化系數(shù)(regularization coefficient):0.001
- 批次大小(batch size):16
- 迭代次數(shù)(max iterations):1000
- 梯度裁剪閾值(gradient clipping threshold):0.001
- 最大迭代次數(shù)(max gradient norm):1e-5
本文內(nèi)容根據(jù)網(wǎng)絡(luò)資料整理,出于傳遞更多信息之目的,不代表金鑰匙跨境贊同其觀點和立場。
轉(zhuǎn)載請注明,如有侵權(quán),聯(lián)系刪除。