PromptDrift — AI 功能提示词回归哨兵
每次改 prompt 之前先跑一遍行为快照,别再让客户悄悄流失
- 痛点
- 给应用加 AI agent 或聊天功能的团队几乎都会遇到:演示时机器人表现完美,两周后为了修一个小需求改了一句 prompt,机器人突然开始乱给折扣、编造不存在的功能、多轮对话直接失忆。这类「静默的 prompt 回归」往往是客户流失的隐形原因,但大家基本靠偶发发现。
- 方案
- 把一组代表性对话和行为断言(不该说的话、必须包含的信息、多轮上下文)存成项目资产,每次改 prompt 后一键重跑并 diff 结果,标出新增/消失的行为。可在 CI 里挂为检查项,改动不合规就拦住发布。
- 用户
- 在自家产品里加 AI agent/聊天功能的小团队和独立开发者
- MVP
- 托管一组黄金对话与断言;一键重跑并做行为 diff;标红新增/消失的回复模式;CI 可调用的命令行检查;支持多版本 prompt 快照对比。
- 变现
- 按项目/月订阅(每个项目 $29 起),或按运行次数计费的 API 调用。
- 为何现在
- 越来越多小团队在生产环境调 prompt,却缺一个轻量的回归检查层;这个痛点正在从「偶发」变成「每周都会遇到」。