Hacker News：AI 热帖· kumaranvpl·· 11 天前AI 评分65
Synthpop.AI 审计 Jev 决策模型：高置信度在知识边界外并不总可靠
Can Jev be trusted when it is confident? Half a million API calls say not always
AI 导读
Synthpop.AI 对 TypeSafe AI 的 Jev jev-1.13.0 决策模型开展约575,442次API调用审计，发现其置信度在熟悉选择题任务中能较好跟踪准确率，但在无依据题目、虚构主题和2024年11月后的新闻问题上仍保持高置信度。
来源：Hacker News：AI 热帖 · synthpop.ai