Текущая2024-04-18

От Meta
Модель последнего класса Meta (Llama 3) выпущена в различных размерах и вкусах. Эта версия 8B, настроенная на инструкции, была оптимизирована для использования в высококачественных диалогах. Он продемонстрировал сильные...
Для Llama 3 8B Instruct пока нет совпавших результатов в подключённых публичных лидербордах. Исходные значения карточки не используются для G‑Score.
Показатели G‑Код, G‑Рассуждения, G‑Агенты и G‑Зрение рассчитаны по массовым таблицам LiveBench, Artificial Analysis и LMArena. Наведите или нажмите на значок рядом с оценкой, чтобы увидеть исходный лидерборд, вариант модели, значение и размер выборки.
Уверенность данных
низкая
Покрытие
0 тестов · 0 направлений
Происхождение
нет данных лидербордов
Место исходного бенчмарка показывается только при закреплённом source record и среди других карточек с источником. Эти старые значения не участвуют в G-Score лидербордов.
| Бенчмарк | Результат | Место | Доказательство |
|---|---|---|---|
| GPQA (Экспертные знания) | 66.2% | н/д | Источник не указан |
| MATH (Математика) | 95% | н/д | Источник не указан |
| MMLU (Общие знания) | 86.8% | н/д | Источник не указан |
| Arena Elo (LMSYS) | 1422 | н/д | Источник не указан |
| HumanEval (Кодинг) | 85.1% | н/д | Источник не указан |
| SWE-bench (Разработка) | 52.4% | н/д | Источник не указан |
Llama 3 8B Instruct — это сверхэффективная компактная языковая модель от компании Meta, представленная в апреле 2024 года. Несмотря на свой скромный размер в 8 миллиардов параметров, модель демонстрирует удивительную интеллектуальную мощь, зачастую превосходя гораздо более крупные системы предыдущих поколений. Она была специально дообучена для ведения качественных диалогов и точного выполнения инструкций, предлагая пользователям быстрый и надежный инструмент для решения повседневных задач.
Модель Llama 3 8B является результатом оптимизации архитектуры и использования гигантского датасета (15+ трлн токенов).
Llama 3 8B Instruct установила новые рекорды в сегменте компактных моделей, став лидером в своём весовом классе сразу после релиза.
| Бенчмарк | Результат | Описание |
|---|---|---|
| MATH | 95.0% | Феноменальная точность в математических задачах (премиум) |
| Arena Elo | 1422 | Лидер среди компактных моделей 2024 года |
| MMLU | 86.8% | Глубокие общие знания и эрудиция |
| HumanEval | 85.1% | Высокое качество генерации программного кода |
| GPQA | 66.2% | Научные тесты PhD-уровня |
| SWE_bench | 52.4% | Эффективное решение инженерных задач |
Модель доступна в виде открытых весов и через API популярных агрегаторов по рекордно низкой цене: около $0.03 за 1M входных токенов и $0.04 за 1M выходных токенов. Это делает её одним из самых экономически выгодных решений в мире для массовой автоматизации.
Плюсы:
Минусы:
Цены приведены за 1 млн токенов и могут меняться. Доступность российских провайдеров проверяется на их стороне.
Реальные замеры сообщества и помеченные редакционные ориентиры для локального запуска Llama 3 8B Instruct.
Сначала оцените, поместится ли выбранная квантизация в вашу RAM или VRAM.
Калькулятор локальных LLMДля этой модели пока нет одобренных замеров.
Если вы запускали её локально, поделитесь конфигурацией — после проверки она появится здесь.
Скорость зависит от версии рантайма, драйверов, длины контекста и настроек. Редакционные значения — ориентир, а не гарантированный результат.
История семейства
Последовательность собрана по датам релиза моделей Meta в каталоге. Она показывает соседние поколения, но не приписывает им совместимость или наследование архитектуры без отдельного источника.
Сервисы, инструменты, материалы и обсуждения, связанные с моделью.
Откройте результаты по названию модели и проверьте актуальную интеграцию.
Задайте вопрос сообществу — карточка модели будет прикреплена автоматически.