Simon Willison·· 8 天前AI 评分37
Qwen3.8 27B 英文单词加法能力基准测试
Qwen3.8 27B addition in words
AI 导读
本地 Qwen3.8-27B-Q4_K_M.gguf 模型在禁用推理的 5,070 例测试中,仅以英文单词输出加法结果的数值准确率为 23.57%,格式合规率达 96.17%。其准确率随数字位数增大从 1 至 3 位操作数的 97.04% 降至 10 至 13 位的 6.44%;启用中等推理后,169 例配对测试答对 167 例。
来源:Simon Willison · simonwillison.net