模型上線後效能下滑,最適合用來監控的指標為何?
iPAS 考題解析
模型上線後效能下滑,最適合用來監控的指標為何?
- A. CPU 和記憶體使用率
- B. 信心度分布
- C. API 延遲時間
- D. PSI (Population Stability Index) ✓ 正確答案
詳細解析
PSI 比較訓練資料和上線資料的分數分布變化。當 PSI 值過高,代表模型的預測分布已經和訓練時不同,效能很可能下滑了。
難度:★★★★
模型上線後效能下滑,最適合用來監控的指標為何?
模型上線後效能下滑,最適合用來監控的指標為何?
PSI 比較訓練資料和上線資料的分數分布變化。當 PSI 值過高,代表模型的預測分布已經和訓練時不同,效能很可能下滑了。