AITerms 登入
機器學習資料處理MLOps

資料版本控制(Data Versioning)是什麼?

資料版本控制追蹤資料集在不同時間點的狀態,確保可重複性、可追溯性,並允許回復到先前的資料版本。

完整定義

資料版本控制是一種管理資料集變更的實踐,它記錄資料在不同時間點的狀態。這使得研究人員和工程師能夠追蹤資料的演變、重現實驗結果,並在需要時回復到先前的資料版本。有效的資料版本控制對於確保機器學習模型的可靠性和可重複性至關重要。

白話說明

你有沒有在你想知道這次拿去訓練的資料是哪一版時,還在想這件事到底該怎麼看?

把它想成資料集的版本號,讓你知道自己用了哪份內容。

沒有版本控制,實驗很難重現,出了問題也很難回頭。

它對 MLOps 很重要,因為資料變了,模型結果也會跟著變。

記住這句

資料版本要對得回去,實驗才重得出來。

比喻:資料版本控制就像遊戲存檔 -- 你可以在不同進度點存檔,如果玩壞了可以讀取之前的存檔重來,或者回顧某個時間點的遊戲狀態。

容易混淆

backup

vs 程式碼版本控制:程式碼版本控制是追蹤程式碼的修改歷史;資料版本控制則是追蹤資料集的修改歷史,兩者都是為了可追溯和協作,但對象不同。

常見混淆:資料版本控制 vs backup

備份是保留副本,版本控制是保留變更歷史。

實際案例

重跑實驗

半年後重新訓練,必須知道當時用的是哪一版資料。

法遵追溯

遇到審查時,要能說清楚哪版資料在什麼時間被使用。

深入了解

1. 它跟程式碼版本控制很像,但追的是資料集,不是程式。

2. 好的版本管理要能回復、比較和標記變更原因。

3. 當資料來源很多時,版本和血緣最好一起管理。

情境判斷

Q1:如果一個模型結果半年後重跑不出來,先檢查什麼?

先檢查資料版本和前處理流程有沒有被固定下來。

Q2:資料版本控制和備份是一樣的嗎?

不一樣,備份是保留副本,版本控制是保留變更歷史。

常見問題

出現在這些考古題

官方公告試題的逐題解析裡,這 2 題把資料版本控制列為延伸術語。

相關術語

本頁內容有提到,或屬於同一組主題的術語

來源

這個術語目前沒有標註外部來源。

其他格式:Markdown 版本