Apgar 开源:无需 LLM 评测捕捉 Agent 回归
热点事件持续更新
Apgar 开源:无需 LLM 评测捕捉 Agent 回归
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
oimo-ai 在 Hacker News 发布 Show HN,推出开源工具 Apgar(Apache-2.0 许可),称可在不依赖 LLM 评测器、数据集或存储提示词的前提下,利用现有 OpenTelemetry 或 Langfuse 追踪数据,自动对比每次发布前后的 Agent 行为差异,判断是否发生回归。 Apgar 要求在部署时打上 release 标签,随后监控发布后最初数小时的全量流量,对比工具错误、重试、循环、调用次数、回答长度、成本与延迟等指标,若较上一版本恶化则通过 Slack 或 Webhook 发送单条告警。
AI 根据报道生成 · 2 小时前更新
最新进展10月30日 01:04
Apgar:无需 LLM 评测即可捕捉 AI Agent 版本回归的开源工具报道时间线
沿着报道,了解事件的不同侧面。
10月30日
- Hacker News · Show HN精选Apgar:无需 LLM 评测即可捕捉 AI Agent 版本回归的开源工具
Apgar 在 Hacker News 发布,通过 OpenTelemetry 或 Langfuse 采集的追踪数据,自动对比每次发布的工具错误、重试、循环、调用次数、回答长度、成本与延迟,判断 Agent 是否回归,完全不依赖 LLM 评测器、数据集或存储提示词。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。