從數字看「避免高成本低收益訓練」
三個指標最值得追蹤：追蹤訓練資料的領域覆蓋率、標註者間一致性（Cohen's Kappa）、以及從資料就緒到微調完成的週期，與未使用清單流程時的成功率對比。但這些指標單看數字並不可靠，需要搭配脈絡解讀。例如同一個任務在不同時段的表現可能差 30%，若忽略時段因素，會誤判改善幅度。建議用滾動 4 週平均替代單週數字，並把 在投入微調訓練前，如何系統性地評估訓練語料的覆蓋廣度、標註一致性與分布平衡性，識別可能導致微調效果不佳的資料問題並在開訓前修正 的波動標記出來，避免被短期雜訊誤導。

季度檢視週期的設計
在投入微調訓練前，如何系統性地評估訓練語料的覆蓋廣度、標註一致性與分布平衡性，識別可能導致微調效果不佳的資料問題並在開訓前修正 一旦上軌道，建議建立每季 90 分鐘的檢視會議，固定回答四個問題：(1) 追蹤訓練資料的領域覆蓋率、標註者間一致性（Cohen's Kappa）、以及從資料就緒到微調完成的週期，與未使用清單流程時的成功率對比 的趨勢方向是否符合預期；(2) 上一季識別的 訓練資料存在系統性偏差導致微調模型在特定族群或主題上效能顯著下滑、資料清理成本超出預算導致計畫中途放棄、以及目標任務與訓練分布不符造成效果不如預期 是否仍是優先項；(3) 有沒有新的場景需要納入；(4) 是否有可以淘汰的舊規則。每季的會議產出一份簡短的書面摘要，作為下季決策的輸入。

中小團隊的特殊提醒
對小於 20 人的團隊來說，在投入微調訓練前，如何系統性地評估訓練語料的覆蓋廣度、標註一致性與分布平衡性，識別可能導致微調效果不佳的資料問題並在開訓前修正 改善有兩個額外注意：(1) 不要套用大企業的方法論（責任分工太細會反效果）、(2) 主要負責人離職風險特別高（要盡早讓二人會做）。建議用「最簡 SOP + 強化交接文件」的組合，而不是嚴格的角色職責表。小團隊的優勢是溝通成本低，要把這個優勢用好。