Benchmark di programmazione dei modelli di IA

Tutti i punteggi dei benchmark di programmazione presenti nelle nostre schede degli strumenti e nel confronto dei modelli, raggruppati per test. Ogni punteggio è accompagnato dalle condizioni dichiarate e da un link alla pagina dell'azienda.

Punteggi mostrati: 15 · benchmark: 2

DeepSWE v1.1 (11 punteggi)

DeepSWE v1.1: punteggi dichiarati dalle aziende. Le intestazioni delle colonne sono pulsanti di ordinamento.
Fonti
Gemini 4 ArgonGoogle77,9 %dichiarato da Googlefonte — Gemini 4 Argon
DeepSeek V4.1-Flash-1017DeepSeek77 %dichiarato da DeepSeek, harness Mini-SWE-V2fonte — DeepSeek V4.1-Flash-1017
MiniMax M3.1 FlashMiniMax73,7 %dichiarato da MiniMaxfonte — MiniMax M3.1 Flash
Grok 4.7xAI71 %livello di ragionamento alto, annunciato da xAIfonte — Grok 4.7
Kimi K3Moonshot AI67,3 %harness mini-SWE-agent (classifica DeepSWE), citato da Moonshotfonte — Kimi K3
GLM-5.3Z.ai66,9 %annunciato da Z.aifonte — GLM-5.3
GLM-5.3-FlashZ.ai63,4 %annunciato da Z.aifonte — GLM-5.3-Flash
DeepSeek V4-Pro-0813DeepSeek62,7 %DeepSeek Harness (modalità minimale), livello di ragionamento massimo, annunciato da DeepSeekfonte — DeepSeek V4-Pro-0813
Muse Spark Open (816B-A42B)Meta60 %dichiarato da Meta, harness preferito, ragionamento xhighfonte — Muse Spark Open (816B-A42B)
Qwen3.8-MaxAlibaba (Qwen)56,6 %il migliore tra Claude Code / mini-SWE-agent, annunciato da Qwenfonte — Qwen3.8-Max
Qwen3.8-27BAlibaba (Qwen)42,2 %harness Claude Code, annunciato da Qwenfonte — Qwen3.8-27B

Terminal-Bench 4.0 (4 punteggi)

Terminal-Bench 4.0: punteggi dichiarati dalle aziende. Le intestazioni delle colonne sono pulsanti di ordinamento.
Fonti
Kimi K3.1 ProMoonshot AI65,7 %harness Claude Code, dichiarato da Moonshotfonte — Kimi K3.1 Pro
Gemini 4 CarbonGoogle65,2 %harness di Artificial Analysis, dichiarato da Googlefonte — Gemini 4 Carbon
GPT-6.1 TerraOpenAI50,3 %massimo livello di ragionamento, dichiarato da OpenAIfonte — GPT-6.1 Terra
Nanbeige4.3-33BNanbeige (BOSS Zhipin)23,8 %harness mini-swe-agent v2.4.6, dichiarato da Nanbeigefonte — Nanbeige4.3-33B

Che cos'è DeepSWE? · Metodologia