Saba
от Mistral
Mistral
Open Source
CTX33K
PARНе раскрыто
StandardGeneralText
HumanEval 94.4%SWE-bench 64.3%GPQA 65.5%MMLU 88.3%
AI-модели для программирования
Для программирования сравнивайте не один общий рейтинг, а профиль модели: HumanEval и MBPP показывают решение коротких задач, SWE-bench — работу с реальными репозиториями, TerminalBench — действия в терминале. Для продакшена дополнительно учитывайте цену, контекст и поддержку инструментов. Телеграм-бот fLLMs мониторит бесплатные API-ключи в роутерах.
Значение показывается только там, где для модели есть результат конкретного теста · Методология и источники
Подборка моделей для генерации кода, работы с репозиториями, терминалом и автономной разработки.
Модели: Для программирования
Найдено: 173 моделейСтраница 7 из 8
Qwen VL Plus
от Qwen
Qwen
Open Source
CTX131K
PARНе раскрыто
StandardGeneralMultimodal
HumanEval 92%SWE-bench 66.6%GPQA 58.8%MMLU 83.5%
Qwen-Turbo
от Qwen
Qwen
Open Source
CTX131K
PARНе раскрыто
StandardGeneralText
HumanEval 98%SWE-bench 63.5%GPQA 72.6%MMLU 89.4%
Sonar
от Perplexity
Other
Proprietary
CTX127K
PARНе раскрыто
StandardGeneralMultimodal
HumanEval 91.3%SWE-bench 65.5%GPQA 71.1%MMLU 90%
Phi 4
от Microsoft
Other
Proprietary
CTX16K
PARНе раскрыто
StandardGeneralText
HumanEval 91.7%SWE-bench 55%GPQA 63.8%MMLU 86%
Llama 3.3 Euryale 70B
от Sao10K
Other
Proprietary
CTX131K
PAR70B
StandardReasoningText
HumanEval 92.7%SWE-bench 66.3%GPQA 68.5%MMLU 88.4%
o1
от OpenAI
Other
Proprietary
CTX200K
PARНе раскрыто
StandardReasoningText
HumanEval 92%SWE-bench 56.8%GPQA 60.6%MMLU 85.1%
Command R7B (12-2024)
от Cohere
Cohere
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 98.5%SWE-bench 65.2%GPQA 66.6%MMLU 89.1%
Nova Lite 1.0
от Amazon
Other
Proprietary
CTX300K
PARНе раскрыто
StandardGeneralMultimodal
HumanEval 92.8%SWE-bench 67%GPQA 66.6%MMLU 87.9%
Nova Pro 1.0
от Amazon
Other
Proprietary
CTX300K
PARНе раскрыто
ProGeneralMultimodal
HumanEval 92.1%SWE-bench 67%GPQA 77.9%MMLU 93.8%
Mistral Large 2411
от Mistral
Mistral
Open Source
CTX131K
PARНе раскрыто
ProGeneralText
HumanEval 92%SWE-bench 53.9%GPQA 75.1%MMLU 94.4%
Qwen2.5 Coder 32B Instruct
от Qwen
Qwen
Open Source
CTX33K
PAR32B
StandardGeneralText
HumanEval 85%SWE-bench 45.4%GPQA 71.3%MMLU 88.8%
UnslopNemo 12B
от TheDrummer
Other
Proprietary
CTX33K
PAR12B
StandardGeneralText
HumanEval 93.8%SWE-bench 61.1%GPQA 70.2%MMLU 87.1%
Llama 3.1 Nemotron 70B Instruct
от NVIDIA
Llama
Open Source
CTX131K
PAR70B
StandardGeneralText
HumanEval 90.9%SWE-bench 58.4%GPQA 66.4%MMLU 87.4%
Inflection 3 Productivity
от Inflection
Other
Proprietary
CTX8K
PARНе раскрыто
ProGeneralText
HumanEval 99%SWE-bench 63.7%GPQA 76%MMLU 93.9%
Rocinante 12B
от TheDrummer
Other
Proprietary
CTX33K
PAR12B
StandardGeneralText
HumanEval 90.8%SWE-bench 52.5%GPQA 67.9%MMLU 89.8%
Command R (08-2024)
от Cohere
Cohere
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 93.8%SWE-bench 59.3%GPQA 69.4%MMLU 88%
Llama 3.1 Euryale 70B v2.2
от Sao10K
Other
Proprietary
CTX131K
PAR70B
StandardReasoningText
HumanEval 94.4%SWE-bench 57.7%GPQA 67%MMLU 89.9%
Hermes 3 405B Instruct
от Nous
Llama
Open Source
CTX131K
PAR405B
StandardGeneralText
HumanEval 95.3%SWE-bench 59.7%GPQA 67.3%MMLU 85.8%
GPT-4o (2024-08-06)
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 90.9%SWE-bench 58.8%GPQA 67%MMLU 87.6%
WizardLM-2 8x22B
от Microsoft
Other
Proprietary
CTX66K
PARНе раскрыто
StandardGeneralText
HumanEval 93.8%SWE-bench 56.1%GPQA 69.2%MMLU 88.5%
Mistral Large
от Mistral
Mistral
Open Source
CTX128K
PARНе раскрыто
ProGeneralText
HumanEval 96.6%SWE-bench 58.6%GPQA 75%MMLU 92.2%
GPT-4 Turbo (older v1106)
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 95.1%SWE-bench 61.4%GPQA 63.4%MMLU 87.4%
Mistral 7B Instruct v0.1
от Mistral
Mistral
Open Source
CTX3K
PAR7B
StandardGeneralText
HumanEval 92.3%SWE-bench 64.7%GPQA 59.5%MMLU 82.5%