Перейти к содержимому
sNews Новости из мира IT и не только!
Новости

Mistral Large 4 вышла с открытыми весами на Hugging Face

Mistral AI 29 октября 2026 года разместила открытые веса модели Mistral Large 4 на Hugging Face. Модель получила улучшенные показатели после дообучения.

Рейтинг 4.5 23 оценки
Релиз открытой языковой модели Mistral Large 4 на платформе Hugging Face в плоском векторном стиле.

Mistral AI 29 октября 2026 года опубликовала веса модели Mistral Large 4 на платформе Hugging Face. Основной репозиторий — mistralai/Mistral-Large-4-1T-A52B. Релиз состоялся раньше запланированной даты 31 октября.

Модель была анонсирована 6 октября 2026 года в режиме API-доступа. Веса предоставили по лицензии Mistral Ecosystem Open-Weight License, допускающей свободное использование, модификацию и fine-tuning для коммерческих продуктов.

Архитектура и технические параметры Mistral Large 4

Mistral Large 4 построена как мультимодальная Mixture-of-Experts. Общее число параметров составляет около 1 триллиона, при этом активно используется 49–52 миллиарда параметров на токен. Архитектура включает 128 экспертов, из которых 4 активны плюс один общий. Контекстное окно достигает 1 миллиона токенов. Вход поддерживает текст и изображения, выход — только текст. Модель обрабатывает более 160 языков и оснащена vision-энкодером на 1,6 миллиарда параметров.

Инфографика архитектуры Mixture-of-Experts модели Mistral Large 4 с 1 триллионом параметров.
Архитектура MoE: разделение 1 трлн параметров на 128 экспертов с 52 млрд активных на токен.

Компания выпустила два официальных чекпоинта: FP8 весом 1,06 ТБ и NVFP4-квантизованную версию размером 610 ГБ, оптимизированную под Blackwell. Сообщество уже опубликовало GGUF-квантизации через проекты Unsloth и llama.cpp. Обучение проводилось с нуля на примерно 3800 GPU NVIDIA Grace Blackwell в европейских дата-центрах Mistral.

После трёх недель дообучения с обратной связью пользователей показатели выросли. На Terminal-Bench 4.0 результат увеличился с 28 % до 41 %. В задачах агентного программирования и кибербезопасности модель достигла 79 % на CyberGym-E2E.

Лицензия, доступ и планы Mistral

Лицензия разрешает коммерческое использование и модификацию, но требует отдельного соглашения для предоставления модели как сервиса. API-цены после релиза снизились до 0,70 доллара за миллион входных токенов и 2,10 доллара за миллион выходных. Модель также доступна через Mistral Studio, OpenRouter, NVIDIA и Microsoft Foundry.

Mistral намерена ускорить выпуск новых версий и подготовить дистиллированные варианты меньшего размера, включая версии для ноутбуков. Полный технический отчёт планируется опубликовать позже. Независимые бенчмарки продолжают собирать данные по производительности модели в различных сценариях.

Частые вопросы

Где скачать веса Mistral Large 4?

Веса доступны в репозитории mistralai/Mistral-Large-4-1T-A52B на Hugging Face с 29 октября 2026 года. Пользователи могут загрузить FP8 и NVFP4 версии.

Какая лицензия у Mistral Large 4?

Модель распространяется под Mistral Ecosystem Open-Weight License — модифицированной версией MIT. Разрешены модификация, fine-tuning и коммерческое использование, кроме Model-as-a-Service.

Сколько параметров у Mistral Large 4?

Общее количество параметров около 1 триллиона, активно используется 49–52 миллиарда на токен. Модель использует архитектуру MoE с 128 экспертами.

Поддерживает ли Mistral Large 4 изображения?

Да, модель мультимодальная: принимает текст и изображения на вход, генерирует только текст. Vision-энкодер содержит 1,6 миллиарда параметров.

Комментарии

Комментариев пока нет. Будьте первым!

Оставить комментарий