跳到正文
热点事件持续更新

CrawlBrain盲测6款LLM,最高分未作默认

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

CrawlBrain 用 100 个真实访客购物问题、同一份店铺页面上下文测试 6 款 LLM,由另一个模型盲评打分。结果显示 Gemini 3.8 Flash 以 7.9 分居首,但 CrawlBrain 仍将 Claude Haiku 4.5 保留为默认模型。 CrawlBrain 称,回答失败时会按链式顺序转给下一款模型,因此单一供应商故障不会中断回答。这一机制是其未直接采用最高分模型的原因之一。 该评测覆盖 Gemini 3.8 Flash、Claude Haiku 4.5、DeepSeek、GPT-4.1-mini、Gemini 3.5 Flash-Lite 和 GPT-4o-mini,结论仅适用于这 100 个购物问答场景。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. Reddit · r/SaaS精选
    CrawlBrain 用 100 个真实购物问题对比 6 个 LLM,最高分模型未被选为默认

    CrawlBrain 作者用 100 个真实访客问题、同一份店铺页面上下文测试 6 个 LLM,由另一个模型盲评打分:Gemini 3.8 Flash 以 7.9 分居首。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。