跳到正文
原文
Hacker News:AI 热帖· emil_sorensen·· 11 天前AI 评分65

Kapa 发布 Company Knowledge Bench,评测智能体检索真实企业知识的表现

Benchmarking retrieval for agents on messy real-world company knowledge

AI 导读

Kapa 发布私有基准 Company Knowledge Bench,用 1,000 个来自真实生产数据的案例评测 7 种检索方案。仅使用 grep 的 gpt-6.1-sol 智能体检索得分为 0.61,但每次查询耗时 13 到 17 秒并返回约 40,000 tokens;Kapa Deep 得分 0.65、约 5 秒完成,返回约 5,000 tokens。

来源:Hacker News:AI 热帖 · kapa.ai