Prompt 迭代法

簡單解釋

迭代法是先建立基準 Prompt，再以代表性輸入測試，記錄輸出與錯誤，最後一次只改一項規則。OpenAI 也建議建立測試和評估套件，並在模型或 Prompt 改版時持續監察。

不要只挑成功例子。測試應包括缺資料、矛盾要求、長文本和不同語氣，並以一致判準比較版本。

實際做法或 Prompt 範例

1. 建立十條虛構測試題，定義正確格式、事實及安全標準。
2. 把錯誤分成理解、事實、格式或安全類，針對主因修改。
3. 記錄版本、變更、結果及人工審批，通過後才部署。

可直接複製的 Prompt 範例

請把以下客服回覆草稿按三項標準檢查：1. 是否只使用提供事實；2. 是否香港繁體中文；3. 是否清楚列出下一步。輸出 JSON：{"pass": true或false, "issues": [字串], "revised_reply": 字串}。資料：客戶問『藍色保溫杯何時補貨？』；已知資料只有『預計下月更新存貨，日期未定』。不得捏造日期。

電腦：選取整段後複製；手機：長按並選取文字。範例只作學習示範，改用實際資料前先去識別化。

新手例子

若草稿寫出確實日期，檢查結果應為 false，issues 指出捏造日期，修訂版保留「日期未定」。

常見錯誤

• 每次同時改很多規則，無法知道哪項有效。
• 只用漂亮輸出作測試，忽略失敗和安全例。
• 改 Prompt 後沒有重新測試舊案例。