首页/AI/提示词工程速查/采样随机性与可复现记录
本包目录(290 条)
提示词基础40 条模式与框架50 条任务型写法50 条
评估与迭代50 条
提示注入与防护50 条工程化实践50 条

采样随机性与可复现记录

让评测尽量可复现:固定采样参数与提示版本,记录模型标识与请求参数;无法固定的部分用重复运行覆盖。

提示词工程速查AI更新于 2026-10-12

评测记录字段

评测记录字段
run_id: 2026-10-12-01
prompt_version: v12 (sha1: 3f9a...)
model: <部署标识与版本>
params: temperature=0, top_p=1, max_tokens=800, seed=42
eval_set: golden-v3 (200 条)
code_path: eval/run.py @ commit abc1234
参数快照温度、top_p、上限与种子全部记录
版本提示文本做哈希,避免“记不清改了哪句”
复跑种子相同也不保证逐字复现;结论用统计口径

易错点

  • 把“温度 0 等于确定输出”当事实是常见误解;跨批次仍可能有差异
  • 只记录模型名不记录部署版本,模型更新后历史结果无法解释

数据来源与参考

  • OpenAI API 文档:seed 参数与可复现性说明(best effort 复现)
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌