参考答案
内容深度:基础 · 无代码示例 · 来源:外部链接 · 未复核 · 28 天前更新
版本化
- Prompt/模型参数/工具配置/检索配置都纳入版本库,记录变更人/原因/评测结果;线上请求可追溯到版本。
- 不要把 Prompt 散落在代码字符串里;用模板/变量 schema,环境隔离。
评测
- 建固定评测集(高频/长尾/对抗/安全),自动指标 + 人工抽检;每次变更跑回归,和基线对比。
- 线上 A/B/灰度,看任务成功率/成本/延迟/投诉;失败样本回流评测集。
发布
- 设准入门槛/回滚开关;模型升级单独评测;监控漂移;Prompt 不是「写完就完」,是持续运营的资产。