封面图

架构图

适合读者

  • 团队协作开发 AI 应用的工程师
  • 需要做 Prompt 评审的技术负责人

这篇文章解决什么问题?

Prompt 修改没有记录,线上效果变差后无法定位原因。

核心概念解释

  • Prompt 版本
  • 评测样例
  • 变更日志
  • 灰度发布
  • 回滚

实战步骤

  1. 创建 prompt.yaml
  2. 保存版本和说明
  3. 准备固定测试集
  4. 输出对比报告

Python 代码示例

本文配套 demo 会生成在:

cd examples/llm-guides/008_prompt_versioning
python demo.py

示例代码遵循两个原则:

  • OPENAI_API_KEY 读取密钥,不在代码里写死。
  • 没有 API Key 时自动进入 mock 模式,方便先理解流程。

核心调用方式可以简化成下面这样:

import os

api_key = os.getenv("OPENAI_API_KEY")
if not api_key:
    print("未配置 OPENAI_API_KEY,进入 mock 模式。")
else:
    # 真实项目中在这里初始化 SDK 客户端并发起请求。
    print("已读取 OPENAI_API_KEY,可以调用模型。")

常见坑

  • 只跑通 Demo 就直接发布,缺少错误处理、日志和人工审核。
  • 把 API Key、真实路径、账号或业务数据写进文章和代码。
  • 没有区分 mock 示例和真实线上环境,导致读者复制后无法复现。
  • 引用 API 或框架能力时没有核对官方文档,版本变化后容易误导读者。

总结

  • 这篇文章围绕「大模型使用指南 08:如何像管理代码一样管理 Prompt 版本?」解决一个具体工程问题:Prompt 修改没有记录,线上效果变差后无法定位原因。
  • 实践时优先保证可复现、可回滚、可人工审核,不要只追求一次性生成效果。
  • 涉及模型能力、API 参数和第三方框架时,发布前需要重新核对官方文档。

CSDN 标签

Prompt、工程化、大模型、Python、测试

公众号摘要

介绍 Prompt 版本管理的最小可用做法,让提示词变成可评审、可回滚的工程资产。

知乎标题变体

  • Prompt 也需要版本管理吗?
  • 团队如何避免提示词越改越乱?
  • 大模型应用的 Prompt 怎么做灰度发布?

参考资料与延伸阅读

  • OpenAI 官方文档:以你实际使用的模型、SDK 和账号权限为准。
  • Python 官方文档:环境变量、虚拟环境和异常处理部分。
  • 相关框架官方文档:LangChain、LlamaIndex、Haystack、向量数据库等按文章主题选择。