AI 專案的上線檢查清單:發布前的十六個確認項
把散落在各篇教程的重點收成一張清單,發布前逐項打勾。
這份清單整合了前面各主題的重點。不必每一項都完美,但每一項都該被明確回答過。
正確性
- 有評測集,且涵蓋典型、邊界、歷史失敗三類案例。
- 結構化輸出的格式合法率達 100%。
- 有棄答路徑,資訊不足時不會硬答。
- 關鍵輸出有程式化驗證(引用比對、加總、白名單)。
安全
- 外部內容有分隔標記,且系統提示說明其為資料。
- 有副作用的操作需要人工確認。
- 金鑰只在伺服器端,前端不持有。
- 輸出進入 HTML、SQL、shell 前都有處理。
成本與效能
- 單次、單使用者、全站三層用量上限都已實作。
- 已量測 p95 延遲,且符合體驗要求。
- 長系統提示已評估前綴快取。
- 重試有上限與退避,錯誤分類正確。
可維運
- 日誌含提示版本、模型版本、token 用量、追蹤碼。
- 有健康檢查與關鍵指標的告警。
- 回滾路徑已實際演練過。
- 個資處理與保存期限已確認符合法規。
把這份清單放進發布流程的範本,每次發布都附上勾選結果。它的價值在於「被強迫回答」,而不是清單本身。