为什么重要
Aider Polyglot 评测编程助手在多语言环境下的代码编辑能力——覆盖 Python/JS/TS/Java/C#/Go 等,DeepSeek R1 报告中的核心编码评测。
构建方式与示例
使用 Aider 框架在多语言项目上测试代码编辑成功率。例如:“在这个 TypeScript 项目中重构 UserService 类,将同步方法改为 async/await。“
关键发现
多语言覆盖揭示了模型的语言偏好——大部分模型在 Python 上最强,Go/Rust 上最弱。
最新进展(2026-10-29 抓取官方榜)
这是一次「陈旧卡大修 + 判停更」,不是分数更新。 三件事:
一、卡内原有三个值里有两个与官方榜对不上,已按官方榜更正。
| 模型 | 本卡旧值 | 官方榜实际值 | 结论 |
|---|---|---|---|
| Claude Opus 4 | 82.7% | 72.0%(32k thinking)/ 70.7%(no think) | 旧值高出 10.7pp,无来源可追溯,已更正 |
| GPT-5 | 78.4% | 88.0%(high)/ 86.7%(medium)/ 81.3%(low) | 旧值不对应任何一个档位,已更正 |
| DeepSeek R1 | 71.2% | 71.4%(0528 版) | 差 0.2pp,属四舍五入,口径一致 |
旧值没有任何一条能对应到官方榜的某个档位,最可能的来源是当时某个二手转述把不同档位或不同模型的值拼在了一起。这提醒一件已经踩过多次的事:Aider 榜的每一个分数都必须带档位(high / medium / low / 32k think / no think),因为同一模型的档位跨度可达 6.7pp(GPT-5 high 88.0% vs low 81.3%)。
二、官方榜已经停更,本卡 status 因此判为 deprecated。 判据有三条:① 榜上最新的模型是 DeepSeek-V3.2-Exp(2025 年 9–10 月),2026 年发布的 Claude Opus 5 / 5.5、GPT-6 系列、Gemini 4、Kimi K3、DeepSeek V4 全部没有条目;② 榜单没有任何”最后更新”标注,也没有 2026 年的新增行;③ Aider 自身的最新公开动作(ProgramBench、CodeClash)都不再是 Polyglot。一个 2024-12 发布、收录截止在 2025 年的 225 题基准,已经无法回答”现在谁的代码编辑更强”。 按惯例,判 deprecated 不等于说它历史上的结论失效——它 2025 年的那些读数仍然有效,只是不再是一把能用的尺子。
三、即便在它自己的时代,这张榜也有一条值得留下的结论:编辑格式与通过率是两回事。 榜单单列了 correct edit format 一列,而它与通过率的排序明显不同——gemini-2.5-pro-preview-06-05 的编辑格式正确率是 99.6%(某些档位甚至 100%),通过率却只有 79.1%–83.1%;o3-pro 是 97.8% 对 84.9%;而 GPT-5 只有 91.6% 却拿到 88.0% 的通过率。“格式完美”与”改对了”是两种能力,只报其中一个都会误判。这和后来「部分分 vs 全完成率」那一族读数是同一个形状,只是 Aider 在 2024 年底就把这两列分开了。
四、成本跨度是这张榜最夸张的一列。 $146.32(o3-pro high)到 $0.88(DeepSeek-V3.2-Exp Chat)相差 166 倍,而对应的通过率是 84.9% 对 70.2%——贵 166 倍只多 14.7pp。前八里唯一的低价条目 DeepSeek-V3.2-Exp (Reasoner) 用 $1.30 拿到 74.2%,比 $65.75 的 Claude Opus 4(72.0%)还高。
关联基准与展望
关联:Copilot Arena、SWE-bench。不足:绑定 Aider 框架(aider CLI 的 diff 格式、编辑格式与系统提示本身就是被测变量的一部分);题集自 2024-12 起未扩容;官方榜停更后无独立复现 lane 接手。