首页/AI/AI 应用速查/提示词版本管理

提示词版本管理

提示词是代码:进版本库、走评审、带变更记录,并配一套固定评测集;每次修改跑同一批题目对比效果,上线可灰度可回滚。

AI 应用速查AI更新于 2026-10-12
存放仓库中的独立文件(如 prompts/ 目录)
记录CHANGELOG 与变更原因
评测固定题集 + 评分标准(人工或 LLM 评审)
流程评审 → 灰度 → 全量 → 可回滚

目录结构示例

目录结构示例
prompts/
  summarize/
    v3.txt          <- 当前线上版本
    v4.txt          <- 灰度候选
    CHANGELOG.md    <- 变更原因与评测结果
没有评测集的团队改提示词等于盲改:先攒 20-30 条真实题目,把提示词迭代变成可比较的实验。

易错点

  • 线上热改提示词,无记录无法回滚
  • 改了不评测,效果变差却归因给模型

数据来源与参考

  • 提示工程通行实践(Prompt as code)

相关工具

​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌