在決策樹（Decision Tree）中，「資訊增益（Information Gain）」的計算目的為何？

iPAS 考題解析

在決策樹（Decision Tree）中，「資訊增益（Information Gain）」的計算目的為何？

  • A. 計算每個特徵的線性相關性強度
  • B. 衡量某節點分裂後樣本的預測準確率
  • C. 評估每個葉節點的純度（Purity）
  • D. 選擇最佳分裂特徵，使分裂後的子集不確定性最小化 ✓ 正確答案

詳細解析

資訊增益衡量使用某特徵進行分裂後，資料集不確定性（熵）的減少量。決策樹在每個節點選擇資訊增益最大的特徵進行分裂，使子集的純度最高（不確定性最低）。

出題年份：114 難度：★★☆