RFP
詢價前要固定的六件事
01 SCOPE
需求與排除範圍
說明要處理哪些情境、哪些不處理，以及遇到例外時由誰接手。
02 DATA
測試資料與權限
提供具代表性的匿名測試集，明確限制資料用途、保存與再訓練。
03 QUALITY
品質計分方式
依任務定義正確、完整、引用、拒答與風險錯誤，不只看平均分數。
04 OPERATIONS
上線與維運條件
包含使用量、延遲、可用性、監控、版本更新、事故通知與支援時段。
05 COST
總持有成本
納入串接、資料整理、人工覆核、模型費用、授權、維運與退出搬遷。
06 EXIT
退出與移轉
定義資料匯出、設定檔、提示、知識庫與操作紀錄的交付格式。
SCORECARD
不要只比準確率
品質高但慢、昂貴或需要大量人工覆核，一樣可能不適合正式營運。
| 評選面向 | 要問的問題 | 驗證證據 |
|---|---|---|
| 任務品質 | 正確、完整、引用與拒答是否符合情境？ | 固定測試集、逐題結果與錯誤分類 |
| 安全與治理 | 權限、敏感資料、提示攻擊與日誌如何處理？ | 資料流、控制措施與事故應變紀錄 |
| 營運能力 | 大量使用、尖峰與外部服務失效時會怎樣？ | 壓力測試、降級流程、SLA 與監控畫面 |
| 成本 | 使用量成長三倍時，總成本如何變化？ | 價格公式、用量假設與三年 TCO |
| 可移轉性 | 更換模型或廠商，需要重做哪些部分？ | 介面文件、匯出範例與移轉演練 |
ACCEPTANCE
把「做完」改成可驗收的階段
離線品質驗證
用固定測試集檢查品質、風險錯誤、拒答與引用，不接正式資料、不影響使用者。
受控流程試行
在小範圍真實流程中運作，所有結果由人覆核，同時記錄節省時間與新增負擔。
正式整合驗收
驗證權限、日誌、監控、備援、降級、資料保存與事故處理，不只驗功能畫面。
營運成效檢視
上線後依既定週期比較基準線；若成效未達或風險升高，能縮小、調整或退出。
真正重要的是錯誤分布，不是平均分數
同樣 90% 的準確率，如果剩下 10% 都集中在高風險情境，就不能用相同方式上線。
FAQ
常見問題
價格最低的方案一定最划算嗎？
不一定。若需要更多人工覆核、客製串接或後續搬遷，低授權費可能帶來更高總持有成本。
廠商說準確率 95%，可以直接採購嗎？
不能只用廠商測試集的單一數字。應使用自己的代表性資料，查看錯誤類型、信賴區間與高風險情境表現。
顧問陪跑會代替公司做採購決定嗎？
不會。顧問負責建立公平的需求與證據，最終採購與風險接受仍由企業決策者負責。