Yuchen Jin· @Yuchenj_UW · X·· 14 天前AI 评分41
AI 导读
我们 @databricks 目前在 NVIDIA 的 SOL-ExecBench kernel 排行榜上排名第一,覆盖全部 4 个赛道。 我们把 GPT-6 Astra 和 Opus 5 放进一个自我爬坡(self-hillclimbing)循环中,这些智能体击败了顶尖的 GPU kernel 工程师。 总 token 花费:约 $70K,远低于 kernel 工程师的薪酬。 一个体会:在编写 GPU kernel 方面,GPT-6 Astra 和 Opus 5 仍然比 OSS 模型强得多。
正文
We @databricks now rank #1 on NVIDIA’s SOL-ExecBench kernel leaderboard, across all 4 tracks.
We put GPT-6 Astra and Opus 5 in a self-hillclimbing loop, and the agents beat the top GPU kernel engineers.
Total toten spend: ~$70K, far less than what kernel engineers get paid.
One learning: GPT-6 Astra and Opus 5 are still much better than OSS models at writing GPU kernels.
来源:Yuchen Jin · x.com