Agent 模型漂移守夜人
监控 AI 编码助手的模型与缓存异常,自动告警并切换
- 痛点
- 开发者发现 VSCode Copilot 会悄悄把正在用的 Claude Haiku 切换成别的模型,导致行为突变;使用第三方代理时缓存命中率会突然从正常跌到 10%,任务一直兜圈子无法干活。这类问题隐蔽、排查耗时,直接打断开发心流。
- 方案
- 一个本地运行或轻量的监控服务,读取各 AI 编码客户端(Copilot、Cursor、Claude Code、第三方代理)的配置与请求日志,实时检测当前实际使用的模型、缓存命中率、响应延迟。指标异常时通过桌面通知或 webhook 告警,并可选自动回滚到指定模型或代理。
- 用户
- 重度使用 AI 编码助手的个人开发者、小团队技术负责人、依赖第三方 API 代理的用户
- MVP
- 读取 Copilot/Cursor 配置文件检测模型变更;解析代理日志计算缓存命中率与延迟;阈值触发系统通知;一键恢复到固定模型配置;生成每日异常摘要
- 变现
- 免费版仅桌面通知与手动检查,订阅版增加自动切换、多设备同步、历史趋势与 webhook
- 为何现在
- AI 编码助手模型迭代极快且透明度低,用户对模型变更和 API 缓存波动的容忍度在下降;独立开发者自己就是重度用户,容易验证且无需大团队