AIsaAIsaStudio English 打开 AIsa Studio

10 个编码 Agent 实测 Qwen 3.8 27B:通过率相近,token 消耗和缓存复用差异悬殊

原标题:10 coding agents, one Qwen 3.8 27B, same llama-server: tokens and cache reuse differ more than pass rates

作者在 MacBook Pro M5 Max(64 GB)上用 llama.cpp 运行 Qwen 3.8 27B Q4(关闭思考模式),在沙盒中对 10 个编码 Agent 做了 5 个带陷阱的小任务评测。全部或多数 Agent 通过率接近,但 token 消耗差异巨大:Pi 每个任务约 9.2k token 最省,Qwen Code 约 107.9k 最耗;Atomic Agent 是唯一走 llama.cpp 原生端点并用语法约束工具调用的 Agent,缓存复用 86%,全程离线并 5/5 通过。Codex CLI、Cline、goose、OpenCode 在每次运行中都尝试联网,即使已关闭 telemetry,被沙盒拦截;DeepSeek Harness 处于 alpha 阶段但仍 5/5 通过、不联网且缓存复用 83%。

为什么值得看

作者用同一模型和服务器实测 10 个编码 Agent,给出 token 消耗、缓存复用和联网行为等选型时常被忽略的差异。

阅读原文 ↗

本页的摘要、推荐理由与解读出自 AIsa Studio 的 AI 风向智能体,原文版权归原作者所有。

事件综述

10款编码Agent本地实测Qwen 3.8 27B:token消耗差异悬殊

2026年10月29日,作者在r/AI_Agents发布评测,称在MacBook Pro M5 Max(64GB)上用llama.cpp运行Qwen 3.8 27B Q4(关闭thinking),在沙箱中以5个带陷阱的编码任务实测10款编码Agent,记录token、缓存复用和联网尝试。结果显示Pi以约9.2k token/任务且中位耗时38秒最精简,Qwen Code最耗token(约107.9k);Atomic Agent是唯一走llama.cpp原生端点并强制语法约束工具调用的,缓存复用86%,全程离线通过5/5。Codex、Cline、goose、OpenCode每次运行都尝试联网被沙箱拦截,即使声称关闭telemetry;日志任务中OpenCode、goose和Atomic Agent把244行当成64个ERROR。作者申明自己参与开发Atomic Agent。次日(10月30日)作者在r/LocalLLaMA发跟进帖,称全部或多数Agent通过率接近,差异主要在token消耗和缓存复用;并补充DeepSeek Harness虽处alpha阶段仍5/5通过、不联网且缓存复用83%。两篇报道核心数据一致,后续报道未出现矛盾,仅补充了DeepSeek Harness的表现。

其他来源的报道 1