AGI-Bench：AI 说真话的验证底座

自动检查 AI 代理是否在引用数据时撒谎，减少对 AI 输出的信任危机

痛点

开发者普遍反映，在让 LLM 代理处理真实数据时，模型经常编造数字、引用错误来源，导致无法信任其报告。有帖子展示了用于捕捉 AI 代理在报告数据时“撒谎”的工具，另一些帖子则关注 AI 代理的决策记录与成本透明化。

方案

提供一个轻量 API 和 CLI，自动比对 AI 代理输出的关键事实与来源数据。代理在生成报告时，调用该服务对每个声明进行快速校验，返回可信度标签和原始引用。开发团队可集成到现有代理工作流中，拦截不可靠的输出。

用户

正使用 LLM 代理处理数据并需要高可靠性的开发者和数据团队

MVP

支持传入事实与数据源，输出校验结果和置信度；提供 REST API 与简易 Python/JS SDK；集成到流行的代理框架（如 LangChain）的中间件；提供网页版仪表盘查看历史校验记录

变现

按 API 调用次数计费，或提供订阅制（包含更多校验额度与私有部署）

为何现在

随着 AI 代理处理关键业务数据，对准确性的需求激增，而通用模型尚未内置可靠的事实校验。独立开发者可快速提供一个轻量、专注的校验层