跳到正文
热点事件历史事件

Qwen3.8 27B 英文单词加法测试:准确率仅约两成

1 篇报道1 个报道来源10 天前更新

先了解这件事

AI 综述

Simon Willison 在本地 DGX Spark 上测试 Qwen3.8-27B(Q4_K_M 量化版)用英文单词输出加法结果的能力,关闭推理时数值准确率仅 23.57%。 准确率随操作数位数急剧下降:1–3 位数为 97.04%,10–13 位跌至 6.44%;格式合规率却达 96.17%,说明模型能按要求的格式作答,但数值计算并不可靠。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月5日
  1. Simon Willison
    Qwen3.8 27B 英文单词加法能力测试

    Simon Willison 在本地 DGX Spark 上测试 Qwen3.8-27B(Q4_K_M.gguf)以英文单词输出加法结果的能力:关闭推理时数值准确率仅 23.57%,从 1-3 位数的 97.04% 跌至 10-13 位数的 6.44%,格式合规率为 96.17%。