SWE-bench Verified
SWE-bench Verified проверяет, справится ли модель в роли агента с исправлением настоящей ошибки в чужом коде. В наборе 500 задач: реальные обращения из открытых Python-репозиториев на GitHub, каждое из которых вручную проверили эксперты. Модель получает репозиторий в изолированном контейнере и текст обращения, сама разбирается в коде и пишет патч. Задачу засчитывают, если с этим патчем проходят скрытые от модели проверочные тесты из исходного исправления.
Чем тест ограничен. Все задачи на Python и взяты всего из двенадцати репозиториев, поэтому о других языках и о вашем коде тест говорит мало. Он почти исчерпан: в таблице Vals AI лучшие результаты дошли до 97 %, и новые модели там на нем больше не проверяют. В феврале 2026 года OpenAI перестала публиковать результаты на этом тесте: по ее разбору, часть проверочных тестов отклоняет верные исправления, а сами задачи все сильнее просачиваются в обучающие данные моделей. Поэтому разница в один-два пункта между моделями почти ничего не значит.
- моделей с результатом
- 116
- с независимым замером
- 87
- с цифрой разработчика
- 67
Как измеряли
Vals AI прогоняла модели в том же минимальном агенте mini-SWE-agent: единственный инструмент — bash, в подсказке только описание задачи, настройки модели по умолчанию, лимит длины ответа всегда максимальный. Для нескольких моделей в таблице есть и строки в других агентах, например Claude Code, Codex или Factory; у каждой модели взята ее лучшая строка, и если это строка другого агента, он подписан у строки. Тест у Vals AI в архиве: результаты уперлись в потолок, и новые модели на нем больше не проверяют. Таблица последний раз обновлялась 1 сентября 2026 года. Vals AI приводит погрешность у каждой строки; здесь она показана там, где мы сверили ее на странице источника.
Таблица Vals AI на сентябрь 2026, архивная · Методология на сайте источника
| 050100 % | ||||||
|---|---|---|---|---|---|---|
| Claude Opus 5(откроется в новой вкладке) | Независимо: 97 % (Vals AI, сентябрь 2026) | 97 ±0,76 | — | — | 370 ₽ / 1 850 ₽~3,70 / ~18,50 PnP | сентябрь 2026 |
| DeepSeek V4 Pro 0813(откроется в новой вкладке) | Независимо: 96,4 % (Vals AI, сентябрь 2026) | 96,4 ±0,83 | — | — | 82,00 ₽ / 246 ₽~0,82 / ~2,46 PnP | сентябрь 2026 |
| GPT-5.6 Sol(откроется в новой вкладке) | Независимо: 96,2 % (Vals AI, сентябрь 2026) | 96,2 ±0,86 | — | — | 296 ₽ / 1 480 ₽~2,96 / ~14,80 PnP | сентябрь 2026 |
| Grok 4.6(откроется в новой вкладке) | Независимо: 95,6 % (Vals AI, сентябрь 2026) | 95,6 ±0,92 | — | — | 178 ₽ / 533 ₽~1,78 / ~5,33 PnP | сентябрь 2026 |
| GLM 5.3(откроется в новой вкладке) | Независимо: 95,4 % (Vals AI, сентябрь 2026) | 95,4 ±0,94 | — | — | 69,30 ₽ / 218 ₽~0,70 / ~2,18 PnP | сентябрь 2026 |
| GPT-5.6 Terra(откроется в новой вкладке) | Независимо: 95,4 % (Vals AI, сентябрь 2026) | 95,4 ±0,94 | — | — | 148 ₽ / 888 ₽~1,48 / ~8,88 PnP | сентябрь 2026 |
| Claude Fable 5(откроется в новой вкладке) | Независимо: 95 % (Vals AI, сентябрь 2026) | 95 ±0,98 | — | — | 740 ₽ / 3 699 ₽~7,40 / ~36,99 PnP | сентябрь 2026 |
| Kimi K3(откроется в новой вкладке) | Независимо: 93,4 % (Vals AI, сентябрь 2026) | 93,4 ±1,11 | — | — | 49,50 ₽ / 1 110 ₽~0,50 / ~11,10 PnP | сентябрь 2026 |
| GPT-5.6 Luna(откроется в новой вкладке) | Независимо: 93 % (Vals AI, сентябрь 2026) | 93 ±1,14 | — | — | 14,80 ₽ / 88,77 ₽~0,15 / ~0,89 PnP | сентябрь 2026 |
| GLM 5.3 Flash(откроется в новой вкладке) | Независимо: 92 % (Vals AI, сентябрь 2026) | 92 ±1,21 | — | — | 11,10 ₽ / 36,99 ₽~0,12 / ~0,37 PnP | сентябрь 2026 |
| DeepSeek V4 Flash 0731(откроется в новой вкладке) | Независимо: 88,8 % (Vals AI, сентябрь 2026) | 88,8 ±1,41 | — | — | 4,88 ₽ / 33,00 ₽~0,05 / 0,33 PnP | сентябрь 2026 |
| Claude Opus 4.8(откроется в новой вкладке) | Независимо: 88,6 % (Vals AI, сентябрь 2026) | 88,6 ±1,42 | — | — | 370 ₽ / 1 850 ₽~3,70 / ~18,50 PnP | сентябрь 2026 |
| Grok 4.5(откроется в новой вкладке) | Независимо: 86,6 % (Vals AI, сентябрь 2026) | 86,6 ±1,52 | — | — | 178 ₽ / 533 ₽~1,78 / ~5,33 PnP | сентябрь 2026 |
| Muse Spark 1.2(откроется в новой вкладке) | Независимо: 86,6 % (Vals AI, сентябрь 2026) | 86,6 ±1,52 | — | — | 138 ₽ / 468 ₽~1,38 / ~4,68 PnP | сентябрь 2026 |
| Qwen3.8 27B(откроется в новой вкладке) | Независимо: 86 % (Vals AI, сентябрь 2026) | 86 ±1,55 | — | — | 4,40 ₽ / 165 ₽~0,05 / 1,65 PnP | сентябрь 2026 |
| GLM 5.2(откроется в новой вкладке) | Независимо: 82,8 % (Vals AI, сентябрь 2026) | 82,8 | — | — | 68,20 ₽ / 270 ₽~0,69 / ~2,70 PnP | сентябрь 2026 |
| GPT-5.5(откроется в новой вкладке) | Независимо: 82,6 % (Vals AI, сентябрь 2026) | 82,6 | — | — | 370 ₽ / 2 220 ₽~3,70 / ~22,20 PnP | сентябрь 2026 |
| Inkling Small(откроется в новой вкладке) | Независимо: 82,2 % (Vals AI, сентябрь 2026). По данным разработчика: 80,2 % (июль 2026) | 82,2 | 80,2 | −2 | 49,50 ₽ / 132 ₽~0,50 / 1,32 PnP | сентябрь 2026 |
| Claude Opus 4.7(откроется в новой вкладке) | Независимо: 82 % (Vals AI, сентябрь 2026) | 82 | — | — | 370 ₽ / 1 850 ₽~3,70 / ~18,50 PnP | сентябрь 2026 |
| Muse Spark 1.1(откроется в новой вкладке) | Независимо: 82 % (Vals AI, сентябрь 2026) | 82 | — | — | 138 ₽ / 468 ₽~1,38 / ~4,68 PnP | сентябрь 2026 |
| Gemini 3.7 Flash(откроется в новой вкладке) | Независимо: 80,8 % (Vals AI, сентябрь 2026) | 80,8 | — | — | 55,48 ₽ / 278 ₽~0,56 / ~2,78 PnP | сентябрь 2026 |
| Gemini 3.8 Flash(откроется в новой вкладке) | Независимо: 80 % (Vals AI, сентябрь 2026) | 80 | — | — | 55,48 ₽ / 278 ₽~0,56 / ~2,78 PnP | сентябрь 2026 |
| Claude Sonnet 5(откроется в новой вкладке) | Независимо: 79,6 % (Vals AI, сентябрь 2026) | 79,6 | — | — | 148 ₽ / 740 ₽~1,48 / ~7,40 PnP | сентябрь 2026 |
| Gemini 3.6 Flash(откроется в новой вкладке) | Независимо: 79,6 % (Vals AI, сентябрь 2026) | 79,6 | — | — | 55,48 ₽ / 278 ₽~0,56 / ~2,78 PnP | сентябрь 2026 |
| Gemini 3.1 Pro Preview(откроется в новой вкладке) | Независимо: 78,8 % (Vals AI, сентябрь 2026). По данным разработчика: 80,6 % (февраль 2026) | 78,8 | 80,6 | +1,8 | 148 ₽ / 888 ₽~1,48 / ~8,88 PnP | сентябрь 2026 |
| Gemini 3.5 Flash(откроется в новой вкладке) | Независимо: 78,8 % (Vals AI, сентябрь 2026) | 78,8 | — | — | 111 ₽ / 666 ₽~1,11 / ~6,66 PnP | сентябрь 2026 |
| Claude Opus 4.6(откроется в новой вкладке)уровень thinking | Независимо: 78,2 % (Vals AI, сентябрь 2026). По данным разработчика: 81,42 % (февраль 2026) | 78,2 | 81,42 | +3,22 | 370 ₽ / 1 850 ₽~3,70 / ~18,50 PnP | сентябрь 2026 |
| GPT-5.4(откроется в новой вкладке)уровень xhigh | Независимо: 78,2 % (Vals AI, сентябрь 2026) | 78,2 | — | — | 185 ₽ / 1 110 ₽~1,85 / ~11,10 PnP | сентябрь 2026 |
| Kimi K2.7 Code(откроется в новой вкладке) | Независимо: 78,2 % (Vals AI, сентябрь 2026) | 78,2 | — | — | 78,38 ₽ / 330 ₽~0,79 / 3,3 PnP | сентябрь 2026 |
| GPT-5.3-Codex(откроется в новой вкладке) | Независимо: 78 % (Vals AI, сентябрь 2026) | 78 | — | — | 193 ₽ / 1 540 ₽~1,93 / 15,4 PnP | сентябрь 2026 |
| Inkling(откроется в новой вкладке) | Независимо: 77,6 % (Vals AI, сентябрь 2026). По данным разработчика: 77,6 % (июль 2026) | 77,6 | 77,6 | 0 | 110 ₽ / 446 ₽1,1 / ~4,46 PnP | сентябрь 2026 |
| Claude Sonnet 4.6(откроется в новой вкладке) | Независимо: 77,4 % (Vals AI, сентябрь 2026). По данным разработчика: 79,6 % (февраль 2026) | 77,4 | 79,6 | +2,2 | 222 ₽ / 1 110 ₽~2,22 / ~11,10 PnP | сентябрь 2026 |
| DeepSeek V4 Pro 0423(откроется в новой вкладке) | Независимо: 77,4 % (Vals AI, сентябрь 2026). По данным разработчика: 80,6 % (апрель 2026) | 77,4 | 80,6 | +3,2 | 48,88 ₽ / 97,76 ₽~0,49 / ~0,98 PnP | сентябрь 2026 |
| Claude Opus 4.5(откроется в новой вкладке)уровень thinking | Независимо: 76,4 % (Vals AI, сентябрь 2026). По данным разработчика: 80,9 % (ноябрь 2025) | 76,4 | 80,9 | +4,5 | 370 ₽ / 1 850 ₽~3,70 / ~18,50 PnP | сентябрь 2026 |
| GLM 5.1(откроется в новой вкладке) | Независимо: 76,4 % (Vals AI, сентябрь 2026) | 76,4 | — | — | 104 ₽ / 326 ₽~1,04 / ~3,26 PnP | сентябрь 2026 |
| Kimi K2.6(откроется в новой вкладке) | Независимо: 76,2 % (Vals AI, сентябрь 2026). По данным разработчика: 80,2 % (апрель 2026) | 76,2 | 80,2 | +4 | 77,00 ₽ / 355 ₽0,77 / ~3,55 PnP | сентябрь 2026 |
| GPT-5.2(откроется в новой вкладке) | Независимо: 75,8 % (Vals AI, сентябрь 2026). По данным разработчика: 80 % (декабрь 2025) | 75,8 | 80 | +4,2 | 156 ₽ / 1 243 ₽~1,56 / ~12,43 PnP | сентябрь 2026 |
| Gemini 3 Flash Preview(откроется в новой вкладке) | Независимо: 75 % (Vals AI, сентябрь 2026). По данным разработчика: 78 % (декабрь 2025) | 75 | 78 | +3 | 36,99 ₽ / 222 ₽~0,37 / ~2,22 PnP | сентябрь 2026 |
| Gemini 3.5 Flash Lite(откроется в новой вкладке) | Независимо: 75 % (Vals AI, сентябрь 2026) | 75 | — | — | 22,20 ₽ / 185 ₽~0,23 / ~1,85 PnP | сентябрь 2026 |
| MiniMax M3(откроется в новой вкладке) | Независимо: 75 % (Vals AI, сентябрь 2026) | 75 | — | — | 26,63 ₽ / 107 ₽~0,27 / ~1,07 PnP | сентябрь 2026 |
| MiniMax M2.5(откроется в новой вкладке) | Независимо: 74,2 % (Vals AI, сентябрь 2026). По данным разработчика: 80,2 % (февраль 2026) | 74,2 | 80,2 | +6 | 29,70 ₽ / 105 ₽~0,30 / ~1,05 PnP | сентябрь 2026 |
| MiMo-V2.5-Pro(откроется в новой вкладке) | Независимо: 74 % (Vals AI, сентябрь 2026). По данным разработчика: 78,9 % (апрель 2026) | 74 | 78,9 | +4,9 | 38,61 ₽ / 77,21 ₽~0,39 / ~0,78 PnP | сентябрь 2026 |
| MiniMax M2.7(откроется в новой вкладке) | Независимо: 73,8 % (Vals AI, сентябрь 2026) | 73,8 | — | — | 26,63 ₽ / 107 ₽~0,27 / ~1,07 PnP | сентябрь 2026 |
| Qwen3.6 Plus(откроется в новой вкладке) | Независимо: 73,4 % (Vals AI, сентябрь 2026). По данным разработчика: 78,8 % (апрель 2026) | 73,4 | 78,8 | +5,4 | 35,75 ₽ / 215 ₽~0,36 / ~2,15 PnP | сентябрь 2026 |
| GPT-5.4 Mini(откроется в новой вкладке) | Независимо: 73 % (Vals AI, сентябрь 2026) | 73 | — | — | 66,56 ₽ / 400 ₽~0,67 / ~4,00 PnP | сентябрь 2026 |
| GPT-5.2-Codex(откроется в новой вкладке) | Независимо: 72,4 % (Vals AI, сентябрь 2026) | 72,4 | — | — | 193 ₽ / 1 540 ₽~1,93 / 15,4 PnP | сентябрь 2026 |
| GLM 5(откроется в новой вкладке) | Независимо: 71,4 % (Vals AI, сентябрь 2026). По данным разработчика: 77,8 % (февраль 2026) | 71,4 | 77,8 | +6,4 | 88,75 ₽ / 284 ₽~0,89 / ~2,84 PnP | сентябрь 2026 |
| Grok 4.3(откроется в новой вкладке) | Независимо: 71,4 % (Vals AI, сентябрь 2026) | 71,4 | — | — | 111 ₽ / 222 ₽~1,11 / ~2,22 PnP | сентябрь 2026 |
| Qwen3.5 Plus 2026-02-15(откроется в новой вкладке) | Независимо: 71,2 % (Vals AI, сентябрь 2026) | 71,2 ±2,03 | — | — | 28,60 ₽ / 172 ₽~0,29 / ~1,72 PnP | сентябрь 2026 |
| MiMo-V2.5(откроется в новой вкладке) | Независимо: 71 % (Vals AI, сентябрь 2026) | 71 | — | — | 12,43 ₽ / 24,85 ₽~0,13 / ~0,25 PnP | сентябрь 2026 |
| Claude Sonnet 4.5(откроется в новой вкладке)уровень thinking | Независимо: 70 % (Vals AI, сентябрь 2026). По данным разработчика: 77,2 % (сентябрь 2025) | 70 | 77,2 | +7,2 | 222 ₽ / 1 110 ₽~2,22 / ~11,10 PnP | сентябрь 2026 |
| Kimi K2.5(откроется в новой вкладке) | Независимо: 70 % (Vals AI, сентябрь 2026). По данным разработчика: 76,8 % (январь 2026) | 70 | 76,8 | +6,8 | 66,00 ₽ / 330 ₽0,66 / 3,3 PnP | сентябрь 2026 |
| Qwen3.6 27B(откроется в новой вкладке) | Независимо: 70 % (Vals AI, сентябрь 2026). По данным разработчика: 77,2 % (апрель 2026) | 70 | 77,2 | +7,2 | 35,20 ₽ / 352 ₽~0,36 / 3,52 PnP | сентябрь 2026 |
| GPT-5.1(откроется в новой вкладке) | Независимо: 69,8 % (Vals AI, сентябрь 2026). По данным разработчика: 76,3 % (ноябрь 2025) | 69,8 | 76,3 | +6,5 | 138 ₽ / 1 100 ₽~1,38 / 11 PnP | сентябрь 2026 |
| GPT-5.4 Nano(откроется в новой вкладке) | Независимо: 69,8 % (Vals AI, сентябрь 2026) | 69,8 | — | — | 17,75 ₽ / 111 ₽~0,18 / ~1,11 PnP | сентябрь 2026 |
| GLM 4.7(откроется в новой вкладке) | Независимо: 69,4 % (Vals AI, сентябрь 2026). По данным разработчика: 73,8 % (декабрь 2025) | 69,4 | 73,8 | +4,4 | 53,25 ₽ / 196 ₽~0,54 / ~1,96 PnP | сентябрь 2026 |
| GPT-5(откроется в новой вкладке) | Независимо: 69 % (Vals AI, сентябрь 2026). По данным разработчика: 74,9 % (август 2025) | 69 | 74,9 | +5,9 | 138 ₽ / 1 100 ₽~1,38 / 11 PnP | сентябрь 2026 |
| Nemotron 3 Ultra(откроется в новой вкладке) | Независимо: 69 % (Vals AI, сентябрь 2026). По данным разработчика: 70,7 % (июнь 2026) | 69 | 70,7 | +1,7 | 53,25 ₽ / 213 ₽~0,54 / ~2,13 PnP | сентябрь 2026 |
| Qwen3.7 Max(откроется в новой вкладке) | Независимо: 68,8 % (Vals AI, сентябрь 2026). По данным разработчика: 80,4 % (май 2026) | 68,8 | 80,4 | +11,6 | 163 ₽ / 487 ₽~1,63 / ~4,87 PnP | сентябрь 2026 |
| DeepSeek V3.2(откроется в новой вкладке)уровень thinking | Независимо: 67,6 % (Vals AI, сентябрь 2026). По данным разработчика: 73,1 % (декабрь 2025) | 67,6 | 73,1 | +5,5 | 30,80 ₽ / 88,00 ₽~0,31 / 0,88 PnP | сентябрь 2026 |
| Claude Haiku 4.5(откроется в новой вкладке)уровень thinking | Независимо: 66,6 % (Vals AI, сентябрь 2026). По данным разработчика: 73,3 % (октябрь 2025) | 66,6 | 73,3 | +6,7 | 73,98 ₽ / 370 ₽~0,74 / ~3,70 PnP | сентябрь 2026 |
| Mistral Medium 3.5(откроется в новой вкладке) | Независимо: 66,4 % (Vals AI, сентябрь 2026). По данным разработчика: 77,6 % (май 2026) | 66,4 | 77,6 | +11,2 | 165 ₽ / 825 ₽1,65 / 8,25 PnP | сентябрь 2026 |
| Ling 3.0 Flash(откроется в новой вкладке) | Независимо: 65,2 % (Vals AI, сентябрь 2026) | 65,2 | — | — | 2,31 ₽ / 6,93 ₽~0,03 / ~0,07 PnP | сентябрь 2026 |
| Qwen3.5-Flash(откроется в новой вкладке) | Независимо: 64,4 % (Vals AI, сентябрь 2026) | 64,4 | — | — | 7,15 ₽ / 28,60 ₽~0,08 / ~0,29 PnP | сентябрь 2026 |
| Devstral 2 2512(откроется в новой вкладке) | Независимо: 62,8 % (Vals AI, сентябрь 2026). По данным разработчика: 72,2 % (декабрь 2025) | 62,8 | 72,2 | +9,4 | 44,00 ₽ / 220 ₽0,44 / 2,2 PnP | сентябрь 2026 |
| Gemini 3.1 Flash Lite Preview(откроется в новой вкладке) | Независимо: 62,8 % (Vals AI, сентябрь 2026) | 62,8 | — | — | 27,50 ₽ / 165 ₽~0,28 / 1,65 PnP | сентябрь 2026 |
| GPT-5 Mini(откроется в новой вкладке) | Независимо: 60,8 % (Vals AI, сентябрь 2026). По данным разработчика: 71 % (август 2025) | 60,8 | 71 | +10,2 | 27,50 ₽ / 220 ₽~0,28 / 2,2 PnP | сентябрь 2026 |
| Kimi K2 Thinking(откроется в новой вкладке) | Независимо: 60,2 % (Vals AI, сентябрь 2026). По данным разработчика: 71,3 % (ноябрь 2025) | 60,2 | 71,3 | +11,1 | 66,00 ₽ / 275 ₽0,66 / 2,75 PnP | сентябрь 2026 |
| Gemini 2.5 Pro(откроется в новой вкладке) | Независимо: 54,4 % (Vals AI, сентябрь 2026) | 54,4 | — | — | 111 ₽ / 888 ₽~1,11 / ~8,88 PnP | сентябрь 2026 |
| Nemotron 3.5 Lightning(откроется в новой вкладке) | Независимо: 52,8 % (Vals AI, сентябрь 2026). По данным разработчика: 51,56 % (август 2026) | 52,8 | 51,56 | −1,24 | 7,70 ₽ / 22,00 ₽~0,08 / 0,22 PnP | сентябрь 2026 |
| Mistral Large 3 2512(откроется в новой вкладке) | Независимо: 41,4 % (Vals AI, сентябрь 2026) | 41,4 | — | — | 55,00 ₽ / 165 ₽0,55 / 1,65 PnP | сентябрь 2026 |
| gpt-oss-120b(откроется в новой вкладке) | Независимо: 33,6 % (Vals AI, сентябрь 2026). По данным разработчика: 62,4 % (август 2025) | 33,6 | 62,4 | +28,8 | 9,90 ₽ / 39,60 ₽~0,10 / ~0,40 PnP | сентябрь 2026 |
| Command A(откроется в новой вкладке) | Независимо: 7,8 % (Vals AI, сентябрь 2026) | 7,8 | — | — | 275 ₽ / 1 100 ₽2,75 / 11 PnP | сентябрь 2026 |
Только по данным разработчика
Цифру опубликовал разработчик модели. Агент, уровень рассуждений, число попыток и даже набор задач он выбирает сам: некоторые считают не все 500 задач, а только их часть. Где условия указаны, они подписаны у строки. Сравнивать эти цифры между собой и с независимыми таблицами можно только с оговоркой.
| 050100 % | ||||||
|---|---|---|---|---|---|---|
| Ember-1(откроется в новой вкладке) | По данным разработчика: 92,2 % (сентябрь 2026) | — | 92,2 | — | 330 ₽ / 1 650 ₽3,3 / 16,5 PnP | сентябрь 2026 |
| Beam 1.0 501B A23B(откроется в новой вкладке) | По данным разработчика: 81,6 % (октябрь 2026) | — | 81,6 | — | 44,00 ₽ / 132 ₽0,44 / 1,32 PnP | октябрь 2026 |
| DeepSeek V4 Flash 0423(откроется в новой вкладке)уровень max | По данным разработчика: 79 % (апрель 2026) | — | 79 | — | 9,90 ₽ / 49,50 ₽~0,10 / ~0,50 PnP | апрель 2026 |
| GPT-5.1-Codex-Max(откроется в новой вкладке)уровень xhigh | По данным разработчика: 77,9 % (ноябрь 2025) | — | 77,9 | — | 138 ₽ / 1 100 ₽~1,38 / 11 PnP | ноябрь 2025 |
| Ripple 65B Preview(откроется в новой вкладке)агент OpenCode, уровень max | По данным разработчика: 76,5 % (ноябрь 2026) | — | 76,5 | — | 11,00 ₽ / 33,00 ₽0,11 / 0,33 PnP | ноябрь 2026 |
| Qwen3.5 397B A17B(откроется в новой вкладке) | По данным разработчика: 76,4 % (февраль 2026) | — | 76,4 | — | 55,00 ₽ / 360 ₽0,55 / 3,6 PnP | февраль 2026 |
| Muse Glimmer 30B(откроется в новой вкладке)уровень high | По данным разработчика: 76 % (август 2026) | — | 76 | — | 38,50 ₽ / 165 ₽~0,39 / 1,65 PnP | август 2026 |
| Claude Opus 4.1(откроется в новой вкладке) | По данным разработчика: 74,5 % (август 2025) | — | 74,5 | — | 1 650 ₽ / 8 250 ₽16,5 / 82,5 PnP | август 2025 |
| Flint (free)(откроется в новой вкладке)агент mini-SWE-agent | По данным разработчика: 74,2 % (октябрь 2026) | — | 74,2 | — | бесплатно | октябрь 2026 |
| GPT-5.1-Codex(откроется в новой вкладке)уровень high | По данным разработчика: 73,7 % (ноябрь 2025) | — | 73,7 | — | 138 ₽ / 1 100 ₽~1,38 / 11 PnP | ноябрь 2025 |
| Seed-2.0-Lite(откроется в новой вкладке) | По данным разработчика: 73,5 % (февраль 2026) | — | 73,5 | — | 27,50 ₽ / 220 ₽~0,28 / 2,2 PnP | февраль 2026 |
| Qwen3.6 35B A3B(откроется в новой вкладке) | По данным разработчика: 73,4 % (апрель 2026) | — | 73,4 | — | 11,00 ₽ / 99,00 ₽0,11 / 0,99 PnP | апрель 2026 |
| Qwen3.5-27B(откроется в новой вкладке) | По данным разработчика: 72,4 % (февраль 2026) | — | 72,4 | — | 28,60 ₽ / 240 ₽~0,29 / 2,4 PnP | февраль 2026 |
| Qwen3.5-122B-A10B(откроется в новой вкладке) | По данным разработчика: 72 % (февраль 2026) | — | 72 | — | 28,60 ₽ / 229 ₽~0,29 / ~2,29 PnP | февраль 2026 |
| Nemotron 3.5 Super VL(откроется в новой вкладке) | По данным разработчика: 71,1 % (октябрь 2026) | — | 71,1 | — | 16,50 ₽ / 55,00 ₽~0,17 / 0,55 PnP | октябрь 2026 |
| Qwen3 Coder Next(откроется в новой вкладке)агент SWE-agent | По данным разработчика: 70,6 % (март 2026) | — | 70,6 | — | 13,20 ₽ / 88,00 ₽~0,14 / 0,88 PnP | март 2026 |
| Solar Pro 4(откроется в новой вкладке)агент OpenHands | По данным разработчика: 70,6 % (август 2026) | — | 70,6 | — | 16,50 ₽ / 66,00 ₽~0,17 / 0,66 PnP | август 2026 |
| Kimi K2 0905(откроется в новой вкладке) | По данным разработчика: 69,2 % (сентябрь 2025) | — | 69,2 | — | 66,00 ₽ / 275 ₽0,66 / 2,75 PnP | сентябрь 2025 |
| Qwen3.5-35B-A3B(откроется в новой вкладке) | По данным разработчика: 69,2 % (февраль 2026) | — | 69,2 | — | 16,50 ₽ / 110 ₽~0,17 / 1,1 PnP | февраль 2026 |
| o3(откроется в новой вкладке)уровень high | По данным разработчика: 69,1 % (апрель 2025) | — | 69,1 | — | 220 ₽ / 880 ₽2,2 / 8,8 PnP | апрель 2025 |
| DeepSeek V3.1 Terminus(откроется в новой вкладке) | По данным разработчика: 68,4 % (сентябрь 2025) | — | 68,4 | — | 29,70 ₽ / 110 ₽~0,30 / 1,1 PnP | сентябрь 2025 |
| DeepSeek V3.2 Exp(откроется в новой вкладке) | По данным разработчика: 67,8 % (сентябрь 2025) | — | 67,8 | — | 29,70 ₽ / 45,10 ₽~0,30 / ~0,46 PnP | сентябрь 2025 |
| DeepSeek V3.1(откроется в новой вкладке)агент внутренний агент DeepSeek | По данным разработчика: 66 % (август 2025) | — | 66 | — | 29,70 ₽ / 110 ₽~0,30 / 1,1 PnP | август 2025 |
| Kimi K2 0711(откроется в новой вкладке) | По данным разработчика: 65,8 % (июль 2025) | — | 65,8 | — | 62,70 ₽ / 253 ₽~0,63 / 2,53 PnP | июль 2025 |
| GLM 4.5(откроется в новой вкладке)агент OpenHands | По данным разработчика: 64,2 % (июль 2025) | — | 64,2 | — | 53,25 ₽ / 196 ₽~0,54 / ~1,96 PnP | июль 2025 |
| gpt-oss-20b(откроется в новой вкладке)уровень high | По данным разработчика: 60,7 % (август 2025) | — | 60,7 | — | 8,25 ₽ / 33,00 ₽~0,09 / 0,33 PnP | август 2025 |
| GLM 4.7 Flash(откроется в новой вкладке) | По данным разработчика: 59,2 % (январь 2026) | — | 59,2 | — | 7,70 ₽ / 44,00 ₽~0,08 / 0,44 PnP | январь 2026 |
| GLM 4.5 Air(откроется в новой вкладке)агент OpenHands | По данным разработчика: 57,6 % (июль 2025) | — | 57,6 | — | 15,40 ₽ / 94,60 ₽~0,16 / ~0,95 PnP | июль 2025 |
| R1 0528(откроется в новой вкладке)агент Agentless | По данным разработчика: 57,6 % (май 2025) | — | 57,6 | — | 62,81 ₽ / 252 ₽~0,63 / ~2,52 PnP | май 2025 |
| GPT-5 Nano(откроется в новой вкладке)уровень high | По данным разработчика: 54,7 % (август 2025) | — | 54,7 | — | 5,50 ₽ / 44,00 ₽~0,06 / 0,44 PnP | август 2025 |
| GPT-4.1(откроется в новой вкладке) | По данным разработчика: 54,6 % (апрель 2025) | — | 54,6 | — | 220 ₽ / 880 ₽2,2 / 8,8 PnP | апрель 2025 |
| LFM2.5-24B-A2B(откроется в новой вкладке)агент OpenCode | По данным разработчика: 51 % (октябрь 2026) | — | 51 | — | 5,50 ₽ / 77,00 ₽~0,06 / 0,77 PnP | октябрь 2026 |
| Gemini 2.5 Flash(откроется в новой вкладке) | По данным разработчика: 48,9 % (июль 2025) | — | 48,9 | — | 26,63 ₽ / 222 ₽~0,27 / ~2,22 PnP | июль 2025 |
| Granite 4.2 8B(откроется в новой вкладке) | По данным разработчика: 47,67 % (август 2026) | — | 47,67 | — | 6,60 ₽ / 16,50 ₽~0,07 / ~0,17 PnP | август 2026 |
| DeepSeek V3(откроется в новой вкладке) | По данным разработчика: 42 % (декабрь 2024) | — | 42 | — | 28,32 ₽ / 114 ₽~0,29 / ~1,14 PnP | декабрь 2024 |
| Gemini 2.5 Flash Lite(откроется в новой вкладке) | По данным разработчика: 31,6 % (сентябрь 2025) | — | 31,6 | — | 8,88 ₽ / 35,50 ₽~0,09 / ~0,36 PnP | сентябрь 2025 |
| GPT-4.1 Mini(откроется в новой вкладке) | По данным разработчика: 23,6 % (апрель 2025) | — | 23,6 | — | 44,00 ₽ / 176 ₽0,44 / 1,76 PnP | апрель 2025 |

