GPT-4o (2024-08-06)
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 90.9%SWE-bench 58.8%GPQA 67%MMLU 87.6%
Каталог AI-моделей и LLM
Каталог содержит 465 AI-моделей с ценами API, контекстом, параметрами и популярными бенчмарками для кода, рассуждений и общих знаний. Телеграм-бот fLLMs мониторит бесплатные API-ключи в роутерах.
Значение показывается только там, где для модели есть результат конкретного теста · Методология и источники
Рейтинг и сравнение AI-моделей
Найдено: 465 моделейСтраница 19 из 20
Llama 3.1 70B Instruct
от Meta
Llama
Open Source
CTX131K
PAR70B
StandardGeneralText
HumanEval 77.6%SWE-bench 46.5%GPQA 58.4%MMLU 82.3%
* Продукт компании Meta Platforms Inc., деятельность которой признана экстремистской и запрещена на территории РФ.
Llama 3.1 8B Instruct
от Meta
Llama
Open Source
CTX16K
PAR8B
StandardGeneralText
HumanEval 77.7%SWE-bench 51.7%GPQA 58.8%MMLU 83.4%
* Продукт компании Meta Platforms Inc., деятельность которой признана экстремистской и запрещена на территории РФ.
Mistral Nemo
от Mistral
Mistral
Open Source
CTX131K
PARНе раскрыто
StandardGeneralText
HumanEval 81.4%SWE-bench 54.6%GPQA 63.4%MMLU 83.6%
GPT-4o-mini
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
FastGeneralText
HumanEval 88.4%SWE-bench 54.9%GPQA 54.6%MMLU 78.4%
GPT-4o-mini (2024-07-18)
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
FastGeneralText
HumanEval 83.4%SWE-bench 53.9%GPQA 58.6%MMLU 81.5%
Gemma 2 27B
от Google
Other
Proprietary
CTX8K
PAR27B
StandardGeneralText
HumanEval 86.6%SWE-bench 55.9%GPQA 62.7%MMLU 87.3%
Llama 3 Euryale 70B v2.1
от Sao10K
Other
Proprietary
CTX8K
PAR70B
StandardReasoningText
HumanEval 78.4%SWE-bench 43%GPQA 66%MMLU 84.1%
Hermes 2 Pro - Llama-3 8B
от Nous
Llama
Open Source
CTX8K
PAR8B
ProGeneralText
HumanEval 86.7%SWE-bench 56.4%GPQA 68.3%MMLU 88.6%
GPT-4o
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 79.4%SWE-bench 50.6%GPQA 64.9%MMLU 88.7%
GPT-4o (2024-05-13)
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 80%SWE-bench 49.6%GPQA 63.6%MMLU 86.3%
Llama 3 70B Instruct
от Meta
Llama
Open Source
CTX8K
PAR70B
StandardGeneralText
HumanEval 81.2%SWE-bench 52.9%GPQA 69%MMLU 86.8%
* Продукт компании Meta Platforms Inc., деятельность которой признана экстремистской и запрещена на территории РФ.
Llama 3 8B Instruct
от Meta
Llama
Open Source
CTX8K
PAR8B
StandardGeneralText
HumanEval 85.1%SWE-bench 52.4%GPQA 66.2%MMLU 86.8%
* Продукт компании Meta Platforms Inc., деятельность которой признана экстремистской и запрещена на территории РФ.
Mixtral 8x22B Instruct
от Mistral
Mistral
Open Source
CTX66K
PARНе раскрыто
StandardGeneralText
HumanEval 85.8%SWE-bench 51.4%GPQA 61.6%MMLU 83.4%
WizardLM-2 8x22B
от Microsoft
Other
Proprietary
CTX66K
PARНе раскрыто
StandardGeneralText
HumanEval 93.8%SWE-bench 56.1%GPQA 69.2%MMLU 88.5%
GPT-4 Turbo
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralMultimodal
HumanEval 87.5%SWE-bench 47.7%GPQA 61.5%MMLU 85.4%
Claude 3 Haiku
от Anthropic
Claude
Proprietary
CTX200K
PARНе раскрыто
FastGeneralMultimodal
HumanEval 81.1%SWE-bench 55.1%GPQA 68.8%MMLU 83.9%
Mistral Large
от Mistral
Mistral
Open Source
CTX128K
PARНе раскрыто
ProGeneralText
HumanEval 96.6%SWE-bench 58.6%GPQA 75%MMLU 92.2%
GPT-3.5 Turbo (older v0613)
от OpenAI
GPT
Proprietary
CTX4K
PARНе раскрыто
StandardGeneralText
HumanEval 84.8%SWE-bench 45.5%GPQA 68.1%MMLU 85.9%
GPT-4 Turbo Preview
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 89.5%SWE-bench 54.3%GPQA 61.7%MMLU 82.6%
Mixtral 8x7B Instruct
от Mistral
Mistral
Open Source
CTX33K
PAR46.7B (12.9B активных)
StandardGeneralText
HumanEval 77.7%SWE-bench 51.9%GPQA 60.4%MMLU 83.1%
Goliath 120B
от Alpindale
Other
Proprietary
CTX6K
PAR120B
StandardGeneralText
HumanEval 82.9%SWE-bench 46%GPQA 63.8%MMLU 86.4%
Auto Router
от OpenRouter
Other
Proprietary
CTX2M
PARНе раскрыто
StandardGeneralText
HumanEval 79%SWE-bench 47.5%GPQA 62.5%MMLU 84.1%
GPT-4 Turbo (older v1106)
от OpenAI
GPT
Proprietary
CTX128K
PARНе раскрыто
StandardGeneralText
HumanEval 95.1%SWE-bench 61.4%GPQA 63.4%MMLU 87.4%
* Продукт компании Meta Platforms Inc., деятельность которой признана экстремистской и запрещена на территории Российской Федерации.