热点事件观察中
Qwen3.8-27B英文单词加法能力评测
1 篇报道1 个报道来源3 天前更新
先了解这件事
AI 综述
Simon Willison对Qwen3.8-27B模型进行了英文单词形式整数加法的基准测试,旨在复现并对比GPT-4o的计算能力。实验在本地DGX Spark硬件上运行。结果显示,当禁用推理功能时,该模型的数值准确率为23.57%,但格式合规率高达96.17%。而在启用中等推理模式后,模型表现显著提升,在169次单次尝试中答对了167次。这一对比揭示了推理机制对该模型处理此类特定语言数学任务的关键影响。
AI 根据报道生成 · 50 分钟前更新
最新进展10月5日 07:34
Qwen3.8-27B启用中等推理后,英文单词加法测试169次尝试答对167次。报道时间线
沿着报道,了解事件的不同侧面。
10月5日
- Simon WillisonQwen3.8 27B 在英文单词加法基准测试中的表现
Qwen3.8-27B-Q4_K_M.gguf 模型在禁用推理时,以英文单词形式进行整数加法的数值准确率为 23.57%,格式合规率达 96.17%。启用中等推理后,该模型在 169 次单次尝试中答对 167 次。实验基于本地 DGX Spark 硬件运行,旨在复现并对比 GPT-4o 的类似计算能力。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。