Перейти к содержимому
RouterNodul

SWE-bench Verified

SWE-bench Verified проверяет, справится ли модель в роли агента с исправлением настоящей ошибки в чужом коде. В наборе 500 задач: реальные обращения из открытых Python-репозиториев на GitHub, каждое из которых вручную проверили эксперты. Модель получает репозиторий в изолированном контейнере и текст обращения, сама разбирается в коде и пишет патч. Задачу засчитывают, если с этим патчем проходят скрытые от модели проверочные тесты из исходного исправления.

Чем тест ограничен. Все задачи на Python и взяты всего из двенадцати репозиториев, поэтому о других языках и о вашем коде тест говорит мало. Он почти исчерпан: в таблице Vals AI лучшие результаты дошли до 97 %, и новые модели там на нем больше не проверяют. В феврале 2026 года OpenAI перестала публиковать результаты на этом тесте: по ее разбору, часть проверочных тестов отклоняет верные исправления, а сами задачи все сильнее просачиваются в обучающие данные моделей. Поэтому разница в один-два пункта между моделями почти ничего не значит.

моделей с результатом
116
с независимым замером
87
с цифрой разработчика
67

Как измеряли

Vals AI прогоняла модели в том же минимальном агенте mini-SWE-agent: единственный инструмент — bash, в подсказке только описание задачи, настройки модели по умолчанию, лимит длины ответа всегда максимальный. Для нескольких моделей в таблице есть и строки в других агентах, например Claude Code, Codex или Factory; у каждой модели взята ее лучшая строка, и если это строка другого агента, он подписан у строки. Тест у Vals AI в архиве: результаты уперлись в потолок, и новые модели на нем больше не проверяют. Таблица последний раз обновлялась 1 сентября 2026 года. Vals AI приводит погрешность у каждой строки; здесь она показана там, где мы сверили ее на странице источника.

Таблица Vals AI на сентябрь 2026, архивная · Методология на сайте источника

Независимое измерениеПо данным разработчика
SWE-bench Verified: Vals AI
050100 %
Claude Opus 5(откроется в новой вкладке)Независимо: 97 % (Vals AI, сентябрь 2026)97 ±0,76——370 ₽ / 1 850 ₽~3,70 / ~18,50 PnPсентябрь 2026
DeepSeek V4 Pro 0813(откроется в новой вкладке)Независимо: 96,4 % (Vals AI, сентябрь 2026)96,4 ±0,83——82,00 ₽ / 246 ₽~0,82 / ~2,46 PnPсентябрь 2026
GPT-5.6 Sol(откроется в новой вкладке)Независимо: 96,2 % (Vals AI, сентябрь 2026)96,2 ±0,86——296 ₽ / 1 480 ₽~2,96 / ~14,80 PnPсентябрь 2026
Grok 4.6(откроется в новой вкладке)Независимо: 95,6 % (Vals AI, сентябрь 2026)95,6 ±0,92——178 ₽ / 533 ₽~1,78 / ~5,33 PnPсентябрь 2026
GLM 5.3(откроется в новой вкладке)Независимо: 95,4 % (Vals AI, сентябрь 2026)95,4 ±0,94——69,30 ₽ / 218 ₽~0,70 / ~2,18 PnPсентябрь 2026
GPT-5.6 Terra(откроется в новой вкладке)Независимо: 95,4 % (Vals AI, сентябрь 2026)95,4 ±0,94——148 ₽ / 888 ₽~1,48 / ~8,88 PnPсентябрь 2026
Claude Fable 5(откроется в новой вкладке)Независимо: 95 % (Vals AI, сентябрь 2026)95 ±0,98——740 ₽ / 3 699 ₽~7,40 / ~36,99 PnPсентябрь 2026
Kimi K3(откроется в новой вкладке)Независимо: 93,4 % (Vals AI, сентябрь 2026)93,4 ±1,11——49,50 ₽ / 1 110 ₽~0,50 / ~11,10 PnPсентябрь 2026
GPT-5.6 Luna(откроется в новой вкладке)Независимо: 93 % (Vals AI, сентябрь 2026)93 ±1,14——14,80 ₽ / 88,77 ₽~0,15 / ~0,89 PnPсентябрь 2026
GLM 5.3 Flash(откроется в новой вкладке)Независимо: 92 % (Vals AI, сентябрь 2026)92 ±1,21——11,10 ₽ / 36,99 ₽~0,12 / ~0,37 PnPсентябрь 2026
DeepSeek V4 Flash 0731(откроется в новой вкладке)Независимо: 88,8 % (Vals AI, сентябрь 2026)88,8 ±1,41——4,88 ₽ / 33,00 ₽~0,05 / 0,33 PnPсентябрь 2026
Claude Opus 4.8(откроется в новой вкладке)Независимо: 88,6 % (Vals AI, сентябрь 2026)88,6 ±1,42——370 ₽ / 1 850 ₽~3,70 / ~18,50 PnPсентябрь 2026
Grok 4.5(откроется в новой вкладке)Независимо: 86,6 % (Vals AI, сентябрь 2026)86,6 ±1,52——178 ₽ / 533 ₽~1,78 / ~5,33 PnPсентябрь 2026
Muse Spark 1.2(откроется в новой вкладке)Независимо: 86,6 % (Vals AI, сентябрь 2026)86,6 ±1,52——138 ₽ / 468 ₽~1,38 / ~4,68 PnPсентябрь 2026
Qwen3.8 27B(откроется в новой вкладке)Независимо: 86 % (Vals AI, сентябрь 2026)86 ±1,55——4,40 ₽ / 165 ₽~0,05 / 1,65 PnPсентябрь 2026
GLM 5.2(откроется в новой вкладке)Независимо: 82,8 % (Vals AI, сентябрь 2026)82,8——68,20 ₽ / 270 ₽~0,69 / ~2,70 PnPсентябрь 2026
GPT-5.5(откроется в новой вкладке)Независимо: 82,6 % (Vals AI, сентябрь 2026)82,6——370 ₽ / 2 220 ₽~3,70 / ~22,20 PnPсентябрь 2026
Inkling Small(откроется в новой вкладке)Независимо: 82,2 % (Vals AI, сентябрь 2026). По данным разработчика: 80,2 % (июль 2026)82,280,2−249,50 ₽ / 132 ₽~0,50 / 1,32 PnPсентябрь 2026
Claude Opus 4.7(откроется в новой вкладке)Независимо: 82 % (Vals AI, сентябрь 2026)82——370 ₽ / 1 850 ₽~3,70 / ~18,50 PnPсентябрь 2026
Muse Spark 1.1(откроется в новой вкладке)Независимо: 82 % (Vals AI, сентябрь 2026)82——138 ₽ / 468 ₽~1,38 / ~4,68 PnPсентябрь 2026
Gemini 3.7 Flash(откроется в новой вкладке)Независимо: 80,8 % (Vals AI, сентябрь 2026)80,8——55,48 ₽ / 278 ₽~0,56 / ~2,78 PnPсентябрь 2026
Gemini 3.8 Flash(откроется в новой вкладке)Независимо: 80 % (Vals AI, сентябрь 2026)80——55,48 ₽ / 278 ₽~0,56 / ~2,78 PnPсентябрь 2026
Claude Sonnet 5(откроется в новой вкладке)Независимо: 79,6 % (Vals AI, сентябрь 2026)79,6——148 ₽ / 740 ₽~1,48 / ~7,40 PnPсентябрь 2026
Gemini 3.6 Flash(откроется в новой вкладке)Независимо: 79,6 % (Vals AI, сентябрь 2026)79,6——55,48 ₽ / 278 ₽~0,56 / ~2,78 PnPсентябрь 2026
Gemini 3.1 Pro Preview(откроется в новой вкладке)Независимо: 78,8 % (Vals AI, сентябрь 2026). По данным разработчика: 80,6 % (февраль 2026)78,880,6+1,8148 ₽ / 888 ₽~1,48 / ~8,88 PnPсентябрь 2026
Gemini 3.5 Flash(откроется в новой вкладке)Независимо: 78,8 % (Vals AI, сентябрь 2026)78,8——111 ₽ / 666 ₽~1,11 / ~6,66 PnPсентябрь 2026
Claude Opus 4.6(откроется в новой вкладке)уровень thinkingНезависимо: 78,2 % (Vals AI, сентябрь 2026). По данным разработчика: 81,42 % (февраль 2026)78,281,42+3,22370 ₽ / 1 850 ₽~3,70 / ~18,50 PnPсентябрь 2026
GPT-5.4(откроется в новой вкладке)уровень xhighНезависимо: 78,2 % (Vals AI, сентябрь 2026)78,2——185 ₽ / 1 110 ₽~1,85 / ~11,10 PnPсентябрь 2026
Kimi K2.7 Code(откроется в новой вкладке)Независимо: 78,2 % (Vals AI, сентябрь 2026)78,2——78,38 ₽ / 330 ₽~0,79 / 3,3 PnPсентябрь 2026
GPT-5.3-Codex(откроется в новой вкладке)Независимо: 78 % (Vals AI, сентябрь 2026)78——193 ₽ / 1 540 ₽~1,93 / 15,4 PnPсентябрь 2026
Inkling(откроется в новой вкладке)Независимо: 77,6 % (Vals AI, сентябрь 2026). По данным разработчика: 77,6 % (июль 2026)77,677,60110 ₽ / 446 ₽1,1 / ~4,46 PnPсентябрь 2026
Claude Sonnet 4.6(откроется в новой вкладке)Независимо: 77,4 % (Vals AI, сентябрь 2026). По данным разработчика: 79,6 % (февраль 2026)77,479,6+2,2222 ₽ / 1 110 ₽~2,22 / ~11,10 PnPсентябрь 2026
DeepSeek V4 Pro 0423(откроется в новой вкладке)Независимо: 77,4 % (Vals AI, сентябрь 2026). По данным разработчика: 80,6 % (апрель 2026)77,480,6+3,248,88 ₽ / 97,76 ₽~0,49 / ~0,98 PnPсентябрь 2026
Claude Opus 4.5(откроется в новой вкладке)уровень thinkingНезависимо: 76,4 % (Vals AI, сентябрь 2026). По данным разработчика: 80,9 % (ноябрь 2025)76,480,9+4,5370 ₽ / 1 850 ₽~3,70 / ~18,50 PnPсентябрь 2026
GLM 5.1(откроется в новой вкладке)Независимо: 76,4 % (Vals AI, сентябрь 2026)76,4——104 ₽ / 326 ₽~1,04 / ~3,26 PnPсентябрь 2026
Kimi K2.6(откроется в новой вкладке)Независимо: 76,2 % (Vals AI, сентябрь 2026). По данным разработчика: 80,2 % (апрель 2026)76,280,2+477,00 ₽ / 355 ₽0,77 / ~3,55 PnPсентябрь 2026
GPT-5.2(откроется в новой вкладке)Независимо: 75,8 % (Vals AI, сентябрь 2026). По данным разработчика: 80 % (декабрь 2025)75,880+4,2156 ₽ / 1 243 ₽~1,56 / ~12,43 PnPсентябрь 2026
Gemini 3 Flash Preview(откроется в новой вкладке)Независимо: 75 % (Vals AI, сентябрь 2026). По данным разработчика: 78 % (декабрь 2025)7578+336,99 ₽ / 222 ₽~0,37 / ~2,22 PnPсентябрь 2026
Gemini 3.5 Flash Lite(откроется в новой вкладке)Независимо: 75 % (Vals AI, сентябрь 2026)75——22,20 ₽ / 185 ₽~0,23 / ~1,85 PnPсентябрь 2026
MiniMax M3(откроется в новой вкладке)Независимо: 75 % (Vals AI, сентябрь 2026)75——26,63 ₽ / 107 ₽~0,27 / ~1,07 PnPсентябрь 2026
MiniMax M2.5(откроется в новой вкладке)Независимо: 74,2 % (Vals AI, сентябрь 2026). По данным разработчика: 80,2 % (февраль 2026)74,280,2+629,70 ₽ / 105 ₽~0,30 / ~1,05 PnPсентябрь 2026
MiMo-V2.5-Pro(откроется в новой вкладке)Независимо: 74 % (Vals AI, сентябрь 2026). По данным разработчика: 78,9 % (апрель 2026)7478,9+4,938,61 ₽ / 77,21 ₽~0,39 / ~0,78 PnPсентябрь 2026
MiniMax M2.7(откроется в новой вкладке)Независимо: 73,8 % (Vals AI, сентябрь 2026)73,8——26,63 ₽ / 107 ₽~0,27 / ~1,07 PnPсентябрь 2026
Qwen3.6 Plus(откроется в новой вкладке)Независимо: 73,4 % (Vals AI, сентябрь 2026). По данным разработчика: 78,8 % (апрель 2026)73,478,8+5,435,75 ₽ / 215 ₽~0,36 / ~2,15 PnPсентябрь 2026
GPT-5.4 Mini(откроется в новой вкладке)Независимо: 73 % (Vals AI, сентябрь 2026)73——66,56 ₽ / 400 ₽~0,67 / ~4,00 PnPсентябрь 2026
GPT-5.2-Codex(откроется в новой вкладке)Независимо: 72,4 % (Vals AI, сентябрь 2026)72,4——193 ₽ / 1 540 ₽~1,93 / 15,4 PnPсентябрь 2026
GLM 5(откроется в новой вкладке)Независимо: 71,4 % (Vals AI, сентябрь 2026). По данным разработчика: 77,8 % (февраль 2026)71,477,8+6,488,75 ₽ / 284 ₽~0,89 / ~2,84 PnPсентябрь 2026
Grok 4.3(откроется в новой вкладке)Независимо: 71,4 % (Vals AI, сентябрь 2026)71,4——111 ₽ / 222 ₽~1,11 / ~2,22 PnPсентябрь 2026
Qwen3.5 Plus 2026-02-15(откроется в новой вкладке)Независимо: 71,2 % (Vals AI, сентябрь 2026)71,2 ±2,03——28,60 ₽ / 172 ₽~0,29 / ~1,72 PnPсентябрь 2026
MiMo-V2.5(откроется в новой вкладке)Независимо: 71 % (Vals AI, сентябрь 2026)71——12,43 ₽ / 24,85 ₽~0,13 / ~0,25 PnPсентябрь 2026
Claude Sonnet 4.5(откроется в новой вкладке)уровень thinkingНезависимо: 70 % (Vals AI, сентябрь 2026). По данным разработчика: 77,2 % (сентябрь 2025)7077,2+7,2222 ₽ / 1 110 ₽~2,22 / ~11,10 PnPсентябрь 2026
Kimi K2.5(откроется в новой вкладке)Независимо: 70 % (Vals AI, сентябрь 2026). По данным разработчика: 76,8 % (январь 2026)7076,8+6,866,00 ₽ / 330 ₽0,66 / 3,3 PnPсентябрь 2026
Qwen3.6 27B(откроется в новой вкладке)Независимо: 70 % (Vals AI, сентябрь 2026). По данным разработчика: 77,2 % (апрель 2026)7077,2+7,235,20 ₽ / 352 ₽~0,36 / 3,52 PnPсентябрь 2026
GPT-5.1(откроется в новой вкладке)Независимо: 69,8 % (Vals AI, сентябрь 2026). По данным разработчика: 76,3 % (ноябрь 2025)69,876,3+6,5138 ₽ / 1 100 ₽~1,38 / 11 PnPсентябрь 2026
GPT-5.4 Nano(откроется в новой вкладке)Независимо: 69,8 % (Vals AI, сентябрь 2026)69,8——17,75 ₽ / 111 ₽~0,18 / ~1,11 PnPсентябрь 2026
GLM 4.7(откроется в новой вкладке)Независимо: 69,4 % (Vals AI, сентябрь 2026). По данным разработчика: 73,8 % (декабрь 2025)69,473,8+4,453,25 ₽ / 196 ₽~0,54 / ~1,96 PnPсентябрь 2026
GPT-5(откроется в новой вкладке)Независимо: 69 % (Vals AI, сентябрь 2026). По данным разработчика: 74,9 % (август 2025)6974,9+5,9138 ₽ / 1 100 ₽~1,38 / 11 PnPсентябрь 2026
Nemotron 3 Ultra(откроется в новой вкладке)Независимо: 69 % (Vals AI, сентябрь 2026). По данным разработчика: 70,7 % (июнь 2026)6970,7+1,753,25 ₽ / 213 ₽~0,54 / ~2,13 PnPсентябрь 2026
Qwen3.7 Max(откроется в новой вкладке)Независимо: 68,8 % (Vals AI, сентябрь 2026). По данным разработчика: 80,4 % (май 2026)68,880,4+11,6163 ₽ / 487 ₽~1,63 / ~4,87 PnPсентябрь 2026
DeepSeek V3.2(откроется в новой вкладке)уровень thinkingНезависимо: 67,6 % (Vals AI, сентябрь 2026). По данным разработчика: 73,1 % (декабрь 2025)67,673,1+5,530,80 ₽ / 88,00 ₽~0,31 / 0,88 PnPсентябрь 2026
Claude Haiku 4.5(откроется в новой вкладке)уровень thinkingНезависимо: 66,6 % (Vals AI, сентябрь 2026). По данным разработчика: 73,3 % (октябрь 2025)66,673,3+6,773,98 ₽ / 370 ₽~0,74 / ~3,70 PnPсентябрь 2026
Mistral Medium 3.5(откроется в новой вкладке)Независимо: 66,4 % (Vals AI, сентябрь 2026). По данным разработчика: 77,6 % (май 2026)66,477,6+11,2165 ₽ / 825 ₽1,65 / 8,25 PnPсентябрь 2026
Ling 3.0 Flash(откроется в новой вкладке)Независимо: 65,2 % (Vals AI, сентябрь 2026)65,2——2,31 ₽ / 6,93 ₽~0,03 / ~0,07 PnPсентябрь 2026
Qwen3.5-Flash(откроется в новой вкладке)Независимо: 64,4 % (Vals AI, сентябрь 2026)64,4——7,15 ₽ / 28,60 ₽~0,08 / ~0,29 PnPсентябрь 2026
Devstral 2 2512(откроется в новой вкладке)Независимо: 62,8 % (Vals AI, сентябрь 2026). По данным разработчика: 72,2 % (декабрь 2025)62,872,2+9,444,00 ₽ / 220 ₽0,44 / 2,2 PnPсентябрь 2026
Gemini 3.1 Flash Lite Preview(откроется в новой вкладке)Независимо: 62,8 % (Vals AI, сентябрь 2026)62,8——27,50 ₽ / 165 ₽~0,28 / 1,65 PnPсентябрь 2026
GPT-5 Mini(откроется в новой вкладке)Независимо: 60,8 % (Vals AI, сентябрь 2026). По данным разработчика: 71 % (август 2025)60,871+10,227,50 ₽ / 220 ₽~0,28 / 2,2 PnPсентябрь 2026
Kimi K2 Thinking(откроется в новой вкладке)Независимо: 60,2 % (Vals AI, сентябрь 2026). По данным разработчика: 71,3 % (ноябрь 2025)60,271,3+11,166,00 ₽ / 275 ₽0,66 / 2,75 PnPсентябрь 2026
Gemini 2.5 Pro(откроется в новой вкладке)Независимо: 54,4 % (Vals AI, сентябрь 2026)54,4——111 ₽ / 888 ₽~1,11 / ~8,88 PnPсентябрь 2026
Nemotron 3.5 Lightning(откроется в новой вкладке)Независимо: 52,8 % (Vals AI, сентябрь 2026). По данным разработчика: 51,56 % (август 2026)52,851,56−1,247,70 ₽ / 22,00 ₽~0,08 / 0,22 PnPсентябрь 2026
Mistral Large 3 2512(откроется в новой вкладке)Независимо: 41,4 % (Vals AI, сентябрь 2026)41,4——55,00 ₽ / 165 ₽0,55 / 1,65 PnPсентябрь 2026
gpt-oss-120b(откроется в новой вкладке)Независимо: 33,6 % (Vals AI, сентябрь 2026). По данным разработчика: 62,4 % (август 2025)33,662,4+28,89,90 ₽ / 39,60 ₽~0,10 / ~0,40 PnPсентябрь 2026
Command A(откроется в новой вкладке)Независимо: 7,8 % (Vals AI, сентябрь 2026)7,8——275 ₽ / 1 100 ₽2,75 / 11 PnPсентябрь 2026

Только по данным разработчика

Цифру опубликовал разработчик модели. Агент, уровень рассуждений, число попыток и даже набор задач он выбирает сам: некоторые считают не все 500 задач, а только их часть. Где условия указаны, они подписаны у строки. Сравнивать эти цифры между собой и с независимыми таблицами можно только с оговоркой.

Только по данным разработчика
050100 %
Ember-1(откроется в новой вкладке)По данным разработчика: 92,2 % (сентябрь 2026)—92,2—330 ₽ / 1 650 ₽3,3 / 16,5 PnPсентябрь 2026
Beam 1.0 501B A23B(откроется в новой вкладке)По данным разработчика: 81,6 % (октябрь 2026)—81,6—44,00 ₽ / 132 ₽0,44 / 1,32 PnPоктябрь 2026
DeepSeek V4 Flash 0423(откроется в новой вкладке)уровень maxПо данным разработчика: 79 % (апрель 2026)—79—9,90 ₽ / 49,50 ₽~0,10 / ~0,50 PnPапрель 2026
GPT-5.1-Codex-Max(откроется в новой вкладке)уровень xhighПо данным разработчика: 77,9 % (ноябрь 2025)—77,9—138 ₽ / 1 100 ₽~1,38 / 11 PnPноябрь 2025
Ripple 65B Preview(откроется в новой вкладке)агент OpenCode, уровень maxПо данным разработчика: 76,5 % (ноябрь 2026)—76,5—11,00 ₽ / 33,00 ₽0,11 / 0,33 PnPноябрь 2026
Qwen3.5 397B A17B(откроется в новой вкладке)По данным разработчика: 76,4 % (февраль 2026)—76,4—55,00 ₽ / 360 ₽0,55 / 3,6 PnPфевраль 2026
Muse Glimmer 30B(откроется в новой вкладке)уровень highПо данным разработчика: 76 % (август 2026)—76—38,50 ₽ / 165 ₽~0,39 / 1,65 PnPавгуст 2026
Claude Opus 4.1(откроется в новой вкладке)По данным разработчика: 74,5 % (август 2025)—74,5—1 650 ₽ / 8 250 ₽16,5 / 82,5 PnPавгуст 2025
Flint (free)(откроется в новой вкладке)агент mini-SWE-agentПо данным разработчика: 74,2 % (октябрь 2026)—74,2—бесплатнооктябрь 2026
GPT-5.1-Codex(откроется в новой вкладке)уровень highПо данным разработчика: 73,7 % (ноябрь 2025)—73,7—138 ₽ / 1 100 ₽~1,38 / 11 PnPноябрь 2025
Seed-2.0-Lite(откроется в новой вкладке)По данным разработчика: 73,5 % (февраль 2026)—73,5—27,50 ₽ / 220 ₽~0,28 / 2,2 PnPфевраль 2026
Qwen3.6 35B A3B(откроется в новой вкладке)По данным разработчика: 73,4 % (апрель 2026)—73,4—11,00 ₽ / 99,00 ₽0,11 / 0,99 PnPапрель 2026
Qwen3.5-27B(откроется в новой вкладке)По данным разработчика: 72,4 % (февраль 2026)—72,4—28,60 ₽ / 240 ₽~0,29 / 2,4 PnPфевраль 2026
Qwen3.5-122B-A10B(откроется в новой вкладке)По данным разработчика: 72 % (февраль 2026)—72—28,60 ₽ / 229 ₽~0,29 / ~2,29 PnPфевраль 2026
Nemotron 3.5 Super VL(откроется в новой вкладке)По данным разработчика: 71,1 % (октябрь 2026)—71,1—16,50 ₽ / 55,00 ₽~0,17 / 0,55 PnPоктябрь 2026
Qwen3 Coder Next(откроется в новой вкладке)агент SWE-agentПо данным разработчика: 70,6 % (март 2026)—70,6—13,20 ₽ / 88,00 ₽~0,14 / 0,88 PnPмарт 2026
Solar Pro 4(откроется в новой вкладке)агент OpenHandsПо данным разработчика: 70,6 % (август 2026)—70,6—16,50 ₽ / 66,00 ₽~0,17 / 0,66 PnPавгуст 2026
Kimi K2 0905(откроется в новой вкладке)По данным разработчика: 69,2 % (сентябрь 2025)—69,2—66,00 ₽ / 275 ₽0,66 / 2,75 PnPсентябрь 2025
Qwen3.5-35B-A3B(откроется в новой вкладке)По данным разработчика: 69,2 % (февраль 2026)—69,2—16,50 ₽ / 110 ₽~0,17 / 1,1 PnPфевраль 2026
o3(откроется в новой вкладке)уровень highПо данным разработчика: 69,1 % (апрель 2025)—69,1—220 ₽ / 880 ₽2,2 / 8,8 PnPапрель 2025
DeepSeek V3.1 Terminus(откроется в новой вкладке)По данным разработчика: 68,4 % (сентябрь 2025)—68,4—29,70 ₽ / 110 ₽~0,30 / 1,1 PnPсентябрь 2025
DeepSeek V3.2 Exp(откроется в новой вкладке)По данным разработчика: 67,8 % (сентябрь 2025)—67,8—29,70 ₽ / 45,10 ₽~0,30 / ~0,46 PnPсентябрь 2025
DeepSeek V3.1(откроется в новой вкладке)агент внутренний агент DeepSeekПо данным разработчика: 66 % (август 2025)—66—29,70 ₽ / 110 ₽~0,30 / 1,1 PnPавгуст 2025
Kimi K2 0711(откроется в новой вкладке)По данным разработчика: 65,8 % (июль 2025)—65,8—62,70 ₽ / 253 ₽~0,63 / 2,53 PnPиюль 2025
GLM 4.5(откроется в новой вкладке)агент OpenHandsПо данным разработчика: 64,2 % (июль 2025)—64,2—53,25 ₽ / 196 ₽~0,54 / ~1,96 PnPиюль 2025
gpt-oss-20b(откроется в новой вкладке)уровень highПо данным разработчика: 60,7 % (август 2025)—60,7—8,25 ₽ / 33,00 ₽~0,09 / 0,33 PnPавгуст 2025
GLM 4.7 Flash(откроется в новой вкладке)По данным разработчика: 59,2 % (январь 2026)—59,2—7,70 ₽ / 44,00 ₽~0,08 / 0,44 PnPянварь 2026
GLM 4.5 Air(откроется в новой вкладке)агент OpenHandsПо данным разработчика: 57,6 % (июль 2025)—57,6—15,40 ₽ / 94,60 ₽~0,16 / ~0,95 PnPиюль 2025
R1 0528(откроется в новой вкладке)агент AgentlessПо данным разработчика: 57,6 % (май 2025)—57,6—62,81 ₽ / 252 ₽~0,63 / ~2,52 PnPмай 2025
GPT-5 Nano(откроется в новой вкладке)уровень highПо данным разработчика: 54,7 % (август 2025)—54,7—5,50 ₽ / 44,00 ₽~0,06 / 0,44 PnPавгуст 2025
GPT-4.1(откроется в новой вкладке)По данным разработчика: 54,6 % (апрель 2025)—54,6—220 ₽ / 880 ₽2,2 / 8,8 PnPапрель 2025
LFM2.5-24B-A2B(откроется в новой вкладке)агент OpenCodeПо данным разработчика: 51 % (октябрь 2026)—51—5,50 ₽ / 77,00 ₽~0,06 / 0,77 PnPоктябрь 2026
Gemini 2.5 Flash(откроется в новой вкладке)По данным разработчика: 48,9 % (июль 2025)—48,9—26,63 ₽ / 222 ₽~0,27 / ~2,22 PnPиюль 2025
Granite 4.2 8B(откроется в новой вкладке)По данным разработчика: 47,67 % (август 2026)—47,67—6,60 ₽ / 16,50 ₽~0,07 / ~0,17 PnPавгуст 2026
DeepSeek V3(откроется в новой вкладке)По данным разработчика: 42 % (декабрь 2024)—42—28,32 ₽ / 114 ₽~0,29 / ~1,14 PnPдекабрь 2024
Gemini 2.5 Flash Lite(откроется в новой вкладке)По данным разработчика: 31,6 % (сентябрь 2025)—31,6—8,88 ₽ / 35,50 ₽~0,09 / ~0,36 PnPсентябрь 2025
GPT-4.1 Mini(откроется в новой вкладке)По данным разработчика: 23,6 % (апрель 2025)—23,6—44,00 ₽ / 176 ₽0,44 / 1,76 PnPапрель 2025