热点事件持续更新
Qwen3.8 27B 英文单词加法基准测试
1 篇报道1 个报道来源20 小时前更新
先了解这件事
AI 综述
2026-10-05,Simon Willison 发布一项基准测试,用 5,070 个禁用推理的案例,检验本地 Qwen3.8-27B-Q4_K_M.gguf 能否仅用英文单词完成正整数加法并给出精确结果。结果显示数字准确率为 23.57%,格式合规率 96.17%。准确率随位数增加明显下降,从一至三位数的 97.04% 降至十至十三位数的 6.44%。此外,在 169 个启用中等推理的配对案例中,该模型答对 167 个。报道未提及更早的相关测试,因此暂无前后矛盾的数据。
AI 根据报道生成 · 2 小时前更新
最新进展10月5日 07:34
新基准显示 Qwen3.8 27B 英文单词加法准确率 23.57%,启用中等推理后 169 例答对 167 例。报道时间线
沿着报道,了解事件的不同侧面。
10月5日
- Simon WillisonQwen3.8 27B 用英文单词做加法的基准测试
一项基准测试用 5,070 个禁用推理的案例,检验本地 Qwen3.8-27B-Q4_K_M.gguf 能否只用英文单词完成正整数加法并给出精确结果,其数字准确率为 23.57%,格式合规率 96.17%。准确率随位数增加从一至三位数的 97.04% 降至十至十三位数的 6.44%;在 169 个启用中等推理的配对案例中,它答对 167 个。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。