在 K-Fold 交叉驗證上同時進行超參數調整和模型評估，會產生什麼問題？

iPAS 考題解析

在 K-Fold 交叉驗證上同時進行超參數調整和模型評估，會產生什麼問題？

  • A. 過度樂觀的評估偏差 (Data Leakage) ✓ 正確答案
  • B. 每個 Fold 內反覆調整導致計算量過大
  • C. 交叉驗證資料有重複使用
  • D. 統計假設衝突

詳細解析

如果在同一組 K-Fold 上既調參又評估，調參過程已經「偷看」了驗證集的資訊，最終的評估結果會過度樂觀。正確做法是用巢狀交叉驗證（Nested CV）。

難度：★★★★