跳到正文
实时
Artificial Analysis Articles·· 18 天前精选72

Artificial Analysis 评测 GitHub Copilot Fusion:性能略低于 Opus 5.5,单任务成本减半

GitHub has released Copilot Fusion in GitHub Copilot, which orchestrates between Anthropic and OpenAI models. It scores 2 points below Opus 5.5 in Claude Code at half the Cost per Task in the Coding Agent Index

要点速览

Artificial Analysis 在 Coding Agent Index v2.0 中实测 GitHub Copilot CLI 的 Copilot Fusion 最高档设置,其单任务成本为 5.59 美元,而 Claude Code 配合 Opus 5.5(max)为 11.42 美元,综合得分仅低 2 分。

Why it matters

Artificial Analysis 使用 Coding Agent Index 实测 Copilot Fusion,给出与 Claude Code 同等性能下的成本与 token 对比。

正文 · AI 翻译

GitHub 在 GitHub Copilot 中发布了 Copilot Fusion,该产品协调 Anthropic 和 OpenAI 模型。在 Claude Code 中的编码代理指数中,它的分数比 Opus 5.5 低 2 分,但每项任务的成本只有 Opus 5.5 的一半。

GitHub 将 Copilot Fusion 描述为一个运行时协调系统,该系统选择和协调模型以优化每个任务的性能、成本和延迟。Copilot Fusion 在 Anthropic 和 OpenAI 之间选择多个模型,包括 Claude Opus 5.5、Claude Sonnet 5.5、GPT-6 Astra 和 GPT-6 Sol。我们在 GitHub Copilot CLI 中对 Artificial Analysis 编码代理指数 v2.0 中的最大设置进行了基准测试。

基于用于完成请求的底层模型收取代币成本。

关键要点:

➤ 成本效益接近前沿性能:GitHub Copilot 中的 Copilot Fusion 每项任务成本为 5.59 美元,而 Claude Code 使用 Opus 5.5(最大)的成本为 11.42 美元。Devin Fusion 使用 Opus 5.5(最大)+ GPT-6 Luna(高)得分为 62,每项任务成本为 8.00 美元。

➤ 在 Terminal-Bench 4.0 中略有领先:编码代理指数 v2.0 对其三个组成部分基准测试进行同等加权。GitHub Copilot 中的 Copilot Fusion 在 Terminal-Bench 4.0 中得分 71,在图表中排名第三,得分为 51,落后于使用 Opus 5.5(最大)的 Claude Code 得分 56,以及 Devin Fusion 使用 Opus 5.5(最大)+ GPT-6 Luna(高)得分 54。其 SWE-Atlas-QnA-AA 得分落后于 57,位于 Codex 中的 GPT-6 Astra 和 Antigravity CLI 中的 Gemini 4 Argon 之间。

➤ 在 Claude Code 中 Opus 5.5 的一半代币使用量:GitHub Copilot Fusion 在编码代理指数中每项任务使用 720 万个代币,大约是 Claude Code 中 Opus 5.5 使用的一半代币,比 Devin Fusion 使用 Opus 5.5(最大)+ GPT-6 Luna(高)少 30%。

GitHub Copilot 中的 Copilot Fusion 在 Terminal-Bench 4.0 中得分 71,略有领先。在图表中排名第三,得分为 51,落后于使用 Opus 5.5(最大)的 Claude Code 得分 56,以及 Devin Fusion 使用 Opus 5.5(最大)+ GPT-6 Luna(高)得分 54。其 SWE-Atlas-QnA-AA 得分落后于 57,位于 Codex 中的 GPT-6 Astra 和 Antigravity CLI 中的 Gemini 4 Argon 之间。

GitHub Copilot Fusion 在编码代理指数中每项任务使用 720 万个代币,大约是 Claude Code 中 Opus 5.5 使用的一半代币。

探索编码代理指数、任务成本和基准测试结果:

https://artificialanalysis.ai/agents/coding-agents?routers=true

来源: Artificial Analysis Articles · artificialanalysis.ai