跳到正文
热点事件观察中

Qwen3.8 27B加法基准

1 篇报道1 个报道来源1 天前更新

先了解这件事

报道摘要

本地 `Qwen3.8-27B-Q4_K_M.gguf` 被测试能否做正整数加法,并只用英文单词输出精确结果。关闭推理的 5,070 个案例中,数值准确率为 23.57%,从一至三位数的 97.04% 降至十至十三位数的 6.44%,格式合规率为 96.17%。开启 medium reasoning 的 169 个配对案例中答对 167 个,但每组只跑 1 次且耗时更长。

摘自 Simon Willison

报道时间线

沿着报道,了解事件的不同侧面。

10月5日
  1. Simon Willison
    Qwen3.8 27B 用英文单词输出加法结果的基准测试

    本地 `Qwen3.8-27B-Q4_K_M.gguf` 被测试能否做正整数加法,并只用英文单词输出精确结果。关闭推理的 5,070 个案例中,数值准确率为 23.57%,从一至三位数的 97.04% 降至十至十三位数的 6.44%,格式合规率为 96.17%。开启 medium reasoning 的 169 个配对案例中答对 167 个,但每组只跑 1 次且耗时更长。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。