跳到正文
原文
Hacker News:AI 热帖· lukaspetersson·· 7 天前AI 评分72

TasteVal 论文提出 AI 实验研究品味基准,Opus 5.5 超过人类专家基线

TasteVal: Does AI have research taste?

AI 导读

P-Zero Research 发布 TasteVal,用 8 个前沿 AI 研发任务衡量模型在固定问题下迭代设计实验并解读结果的能力。评测以达到人类专家分数所需实验计算为指标,由固定编码智能体在单张 H100 上执行,单次运行上限为 40 GPU-hours 或 120 小时墙钟时间,人类基线来自 24 名专家。

来源:Hacker News:AI 热帖 · pzeroresearch.com