# 預熱訓練（Warmup）

預熱訓練是一種在模型訓練初期，逐步提高學習率的策略，旨在穩定訓練過程，避免初期梯度爆炸或震盪。

## 完整說明

預熱訓練是一種在深度學習模型訓練初期使用的學習率調整策略。它並非直接使用設定好的學習率，而是從一個較小的學習率開始，逐步增加到目標學習率。這個過程有助於模型更穩定地學習，避免訓練初期出現梯度爆炸或震盪等問題，提升模型最終的效能。

## 常見問題

### undefined



### undefined



### undefined



---

來源：https://aiterms.tw/terms/warmup
快查頁：https://aiterms.tw/terms/warmup
深度解說：https://aiterms.tw/learning/what-is-warmup