EdgeGizmo
全部 AI 动态
Simon Willison · 2026/10/6 · 论文

Qwen3.8 27B 用英文单词输出加法结果的评测

Qwen3.8 27B 本地模型在用英文单词输出整数加法结果的评测中,关闭推理时准确率为 23.57%,开启推理后答对 169 次中的 167 次。关闭推理的 5,070 个案例中,格式合规率为 96.17%,但操作数增大时计算准确率显著下降;开启推理的测试每组仅采样一次。