跳到正文
原文
Hacker News:AI 热帖· disisnoturbusin·· 7 天前AI 评分65

13 个 LLM 回答相同 76 个带来源问题:无搜索准确率 44.5%,有搜索 96.0%

Thirteen LLMs asked the same 76 sourced questions, with and without web search

AI 导读

LLM Quorum 让 13 个 LLM 用相同措辞回答 76 个均有主要来源的问题,无网络搜索时答对 440/988,准确率 44.5%;允许网络搜索时答对 948/988,准确率 96.0%,13 个模型全部提升。完整测试覆盖 76 个模型席位、1591 次付费调用,并记录过时、幻觉、拒答、截断和错误等结果;OpenRouter 付费 API 计量成本为 $31.74。

来源:Hacker News:AI 热帖 · llmquorum.aidataforager.com