跳到正文
热点事件持续更新

Apgar 开源:无需 LLM 评测捕捉 Agent 回归

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

oimo-ai 在 Hacker News 发布 Show HN,推出开源工具 Apgar(Apache-2.0 许可),称可在不依赖 LLM 评测器、数据集或存储提示词的前提下,利用现有 OpenTelemetry 或 Langfuse 追踪数据,自动对比每次发布前后的 Agent 行为差异,判断是否发生回归。 Apgar 要求在部署时打上 release 标签,随后监控发布后最初数小时的全量流量,对比工具错误、重试、循环、调用次数、回答长度、成本与延迟等指标,若较上一版本恶化则通过 Slack 或 Webhook 发送单条告警。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. Hacker News · Show HN精选
    Apgar:无需 LLM 评测即可捕捉 AI Agent 版本回归的开源工具

    Apgar 在 Hacker News 发布,通过 OpenTelemetry 或 Langfuse 采集的追踪数据,自动对比每次发布的工具错误、重试、循环、调用次数、回答长度、成本与延迟,判断 Agent 是否回归,完全不依赖 LLM 评测器、数据集或存储提示词。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。