跳到正文
原文
GitHub Blog · AI & ML· Michelle Zhou·· 8 天前精选AI 评分62

GitHub 发布开放 AI 代码审查基准 ReviewBench

ReviewBench: An open benchmark for AI code review

AI 导读

GitHub 发布开放 AI 代码审查离线基准 ReviewBench,研究预览版已上线,可用于比较代码审查智能体并接入自有系统。基准基于 103.9M 个 GitHub pull request 的分布构建,包含 187 个公开仓库中的 219 个 pull request、覆盖 19 种语言,并提供多来源 golden set、严重度和类别标注。

推荐理由

原文说明了基准语料、标注流程和接入方式,适合用来理解代码审查智能体应如何做可复现评测。

来源:GitHub Blog · AI & ML · github.blog