SWE-bench Verified (Epoch AI)
33 Modelle mit Wert. Spitzenreiter: Opus 4.7 mit 83,5 %.
| Steckbrief des Benchmarks | |
|---|---|
| Aufgabe | allgemein - Fehlerbehebung in echten Code-Repositories |
| Metrik | Anteil geloester Aufgaben aus 500 geprueften GitHub-Issues, eigener Agentenrahmen von Epoch |
| Richtung | ↑ höher ist besser |
| Einschränkung | Nur 6 Katalogmodelle gemessen, meist mit hoher Reasoning-Stufe - kleine und offene Modelle fehlen fast ganz. Werte haengen am Agentenrahmen und sind mit der offiziellen swebench.com-Rangliste nicht vergleichbar. Fuer die Anreicherung das fernste Signal. |
| Stand | 14.09.2026 |
| Quelle | epoch.ai |
| Lizenz | CC BY 4.0 — Epoch AI |
Rangliste (33)
Kein Eintrag passt zum Filter.
| Modell | Rang | Wert | Hersteller | EU-Verarbeitung: EingabeEU ein | EU-Verarbeitung: AusgabeEU aus | alle Anbieter: Eingabealle ein | alle Anbieter: Ausgabealle aus | Offene Gewichte | Grafikspeicher (4-Bit, abgeleitet)Grafikspeicher |
|---|---|---|---|---|---|---|---|---|---|
| Opus 4.7 | 1 | 83,5 % | Anthropic | 4,88 € | 24,40 € | 2,24 € | 11,20 € | – nein | – |
| Gemini 3.5 Flash | 2 | 79,3 % | 1,48 € | 8,89 € | 0,67 € | 4,03 € | – nein | – | |
| glm-5.2 | 3 | 78,7 % | Z.ai | 0,81 € | 2,91 € | 0,15 € | 0,48 € | ✓ ja | ab 419 GB |
| Opus 4.6 | 3 | 78,7 % | Anthropic | 4,77 € | 23,84 € | 2,24 € | 11,20 € | – nein | – |
| DeepSeek V4 Pro | 5 | 77,6 % | DeepSeek | 0,90 € | 1,79 € | 0,90 € | 1,79 € | ✓ ja | ab 884 GB |
| Qwen 3.7 Max | 6 | 77,3 % | Alibaba Cloud | – | – | 1,12 € | 3,36 € | – nein | – |
| GPT-5.4 | 7 | 76,9 % | OpenAI | 2,60 € | 13,87 € | 1,12 € | 6,72 € | – nein | – |
| Kimi K2.6 | 8 | 76,7 % | Moonshot AI | 0,43 € | 2,67 € | 0,35 € | 1,61 € | ✓ ja | ab 569 GB |
| Opus 4.5 | 8 | 76,7 % | Anthropic | 4,77 € | 23,85 € | 2,24 € | 11,20 € | – nein | – |
| gemini-3.1-pro-preview-customtools | 10 | 75,6 % | – | – | 0,90 € | 5,37 € | – nein | – | |
| Gemini 3 Flash Preview | 11 | 75,4 % | – | – | 0,22 € | 1,34 € | – nein | – | |
| Claude Sonnet 4.6 | 12 | 75,2 % | Anthropic | 2,87 € | 14,31 € | 1,34 € | 6,72 € | – nein | – |
| GPT-5.3 Codex | 13 | 74,8 % | OpenAI | – | – | 1,57 € | 12,54 € | – nein | – |
| GLM 5.1 | 14 | 74,2 % | Z.ai | 1,24 € | 3,90 € | 0,81 € | 2,60 € | ✓ ja | ab 419 GB |
| GPT-5.2 | 15 | 73,8 % | OpenAI | 1,72 € | 13,79 € | 0,78 € | 6,27 € | – nein | – |
| Kimi K2.5 (Retiring) | 15 | 73,8 % | Moonshot AI | 0,58 € | 3,22 € | 0,27 € | 1,34 € | ✓ ja | ab 554 GB |
| gpt-5 | 17 | 73,6 % | OpenAI | 0,62 € | 4,93 € | 0,56 € | 4,48 € | – nein | – |
| GPT-5 2025-08-07 | 17 | 73,6 % | OpenAI | – | – | 0,56 € | 4,48 € | – nein | – |
| Claude Opus 4.1 (retired, except on Claude Models on Google Cloud (Google managed) and Bedrock) | 19 | 73,3 % | Anthropic | – | – | 6,72 € | 33,59 € | – nein | – |
| GLM-5 | 20 | 72,1 % | Z.ai | 1,15 € | 3,68 € | 0,45 € | 1,43 € | – | – |
| Sonnet 4.5 | 21 | 71,3 % | Anthropic | 2,68 € | 13,42 € | 1,34 € | 6,72 € | – nein | – |
| Claude Opus 4 (retired, except on Claude Models on Google Cloud (Google managed)) | 22 | 70,7 % | Anthropic | – | – | 6,72 € | 33,59 € | – nein | – |
| gpt-5.1 | 23 | 68 % | OpenAI | 1,23 € | 9,84 € | 0,56 € | 4,48 € | – nein | – |
| GPT-5 mini | 24 | 64,7 % | OpenAI | 0,25 € | 1,97 € | 0,11 € | 0,90 € | – nein | – |
| o3 | 25 | 62,3 % | OpenAI | – | – | 0,90 € | 3,58 € | – nein | – |
| o3 2025-04-16 | 25 | 62,3 % | OpenAI | 0,99 € | 3,94 € | 0,90 € | 3,58 € | – nein | – |
| Claude 3.7 Sonnet | 27 | 61 % | Anthropic | – | – | 1,34 € | 6,72 € | – | – |
| Qwen 3.6 Plus | 28 | 57,9 % | Alibaba Cloud | – | – | 0,45 € | 2,69 € | – nein | – |
| Gemini 2.5 Pro | 29 | 57,6 % | 1,34 € | 8,94 € | 0,56 € | 4,48 € | – nein | – | |
| GPT-4.1 | 30 | 48,5 % | OpenAI | 1,97 € | 7,87 € | 0,90 € | 3,58 € | – nein | – |
| GPT-4.1-2025-04-14 | 30 | 48,5 % | OpenAI | 0,99 € | 3,94 € | 0,90 € | 3,58 € | – nein | – |
| GPT-4o | 32 | 31 % | OpenAI | 2,39 € | 9,55 € | 1,12 € | 4,48 € | – nein | – |
| GPT-4o-2024-1120 | 32 | 31 % | OpenAI | 2,46 € | 9,85 € | 1,12 € | 4,48 € | – nein | – |
Gleicher Wert = gleicher Rang. Beim Filtern bleibt der Rang der Platz in der ganzen Liste. Grafikspeicher „ab …“ ist eine Untergrenze (Parameter × 0,55 GB + 4 GB). Preise: € je 1 Mio. Token. Quelle: Preisseiten der Anbieter, gelesen und geprüft von searchit. Stand 07.11.2026.
Preis und Leistung
Werte: SWE-bench Verified (Epoch AI), CC BY 4.0 — Epoch AI. Unverändert aus der Quelle übernommen.