多任務學習中 NER 表現提升但文檔分類表現下降,最可能的原因為何?

iPAS 考題解析

多任務學習中 NER 表現提升但文檔分類表現下降,最可能的原因為何?

  • A. 架構不支援多任務
  • B. 文檔分類不需要語意化
  • C. 損失函數未進行任務間的權重平衡 ✓ 正確答案
  • D. BERT 不支援 Multi-Head Attention

詳細解析

多任務學習中如果各任務的損失函數(Loss Function)權重不平衡,模型會偏向某些任務(如 NER),犧牲其他任務(如分類)。需要調整各任務損失的權重比例。

難度:★★★★