Память при каждой точности
| Версия | Веса | С контекстом | Минимальный Mac |
|---|---|---|---|
| 8 бит | 717 ГБ | 775 ГБ | больше, чем у любого Mac |
| 6 бит | 548 ГБ | 592 ГБ | больше, чем у любого Mac |
| 4 бит | 380 ГБ | 410 ГБ | больше, чем у любого Mac |
| 3 бит ниже качество | 295 ГБ | 319 ГБ | 512 ГБ |
| 2 бит ниже качество | 211 ГБ | 228 ГБ | 512 ГБ |
На каждом чипе Apple
Минимальный объем памяти каждого чипа, на котором запускается Mistral Large 3 (675B), лучшая версия, которая помещается, и ожидаемая скорость генерации.
| Чип | Нужно | Версия | Токенов/с |
|---|---|---|---|
| M6 | ни один объем не подходит | Слишком большая | – |
| M5 Ultra | 512 ГБ | 3 бит Работает хорошо | 30–54 |
| M5 Max | ни один объем не подходит | Слишком большая | – |
| M5 Pro | ни один объем не подходит | Слишком большая | – |
| M5 | ни один объем не подходит | Слишком большая | – |
| M4 Max | ни один объем не подходит | Слишком большая | – |
| M4 Pro | ни один объем не подходит | Слишком большая | – |
| M4 | ни один объем не подходит | Слишком большая | – |
| M3 Ultra | 512 ГБ | 3 бит Работает хорошо | 21–37 |
| M3 Max | ни один объем не подходит | Слишком большая | – |
| M3 Pro | ни один объем не подходит | Слишком большая | – |
| M3 | ни один объем не подходит | Слишком большая | – |
| M2 Ultra | ни один объем не подходит | Слишком большая | – |
| M2 Max | ни один объем не подходит | Слишком большая | – |
| M2 Pro | ни один объем не подходит | Слишком большая | – |
| M2 | ни один объем не подходит | Слишком большая | – |
| M1 Ultra | ни один объем не подходит | Слишком большая | – |
| M1 Max | ни один объем не подходит | Слишком большая | – |
| M1 Pro | ни один объем не подходит | Слишком большая | – |
| M1 | ни один объем не подходит | Слишком большая | – |
Как запустить
- Самый простой способ: скачайте MLX Harness — бесплатно и с открытым кодом. Найдите Mistral Large 3 (675B), скачайте версию, которая подходит вашему Mac, и общайтесь. Приложение также отдает модель другим вашим программам через API, совместимый с OpenAI.Скачать MLX HarnessБесплатно · Apple Silicon · macOS 14.5 или новее
- В Терминале с MLX от Apple:
pip install mlx-lmmlx_lm.chat --model mlx-community/Mistral-Large-3-675B-Instruct-2512-mlx-4bitСборка: mlx-community/Mistral-Large-3-675B-Instruct-2512-mlx-4bit на Hugging Face. Рядом лежат версии с другой точностью.
Пошагово: скачать и запустить LLM на Mac · как пользоваться MLX Harness · MLX, Ollama и llama.cpp
О модели Mistral Large 3 (675B)
| Разработчик | Mistral AI |
|---|---|
| Параметры | 675B всего · 41B активных (mixture of experts) |
| Контекст | токенов: 256K |
| Лицензия | Apache-2.0 |
| Выпуск | 2025-11 |
| Ввод | Текст и изображения |
| Веса | mistralai/Mistral-Large-3-675B-Instruct-2512 |
Вопросы
- Сколько памяти нужно модели Mistral Large 3 (675B)?
- Около 380 ГБ на веса (4 бит) плюс место для контекста: всего 410 ГБ. Это больше, чем есть сегодня у любого Mac.
- Насколько быстро Mistral Large 3 (675B) работает на Mac?
- Скорость генерации зависит от пропускной способности памяти. Самый быстрый Mac для нее здесь — M5 Ultra с 512 ГБ: около 30–54 токенов в секунду (3 бит). Минимальный Mac, который ее запускает, — M5 Ultra с 512 ГБ — выдает около 30–54.
- Почему Mistral Large 3 (675B) работает быстрее, чем можно ожидать по размеру?
- Это модель mixture-of-experts: она держит в памяти 675B параметров, но на каждый токен читает только 41B, поэтому пишет со скоростью гораздо меньшей модели.
Похожие модели
Для карточки модели или README
Показывает минимальный Mac, на котором Mistral Large 3 (675B) хорошо работает, и ведет сюда.
[](https://mlx.app/run/mistral-large-3)Как это рассчитано
Память: параметры модели при 8, 6, 4, 3 или 2 битах на вес плюс групповые масштабы MLX (полбита на вес) или ее нативный формат, а сверху — место для контекста. По умолчанию macOS отдает GPU около 75% объединенной памяти. Скорость: пропускная способность памяти, деленная на число байтов, читаемых на каждый токен, — это потолок для одного диалога; в публичных тестах llama.cpp на Apple Silicon реальные запуски достигают примерно 45–80% от него, и показан именно этот диапазон. Это оценки, а не измерения: измерьте свой Mac в MLX Bench. Данные моделей — из официальных карточек моделей, данные чипов — из технических характеристик Apple. Проверено 2026-10-19. Те же данные, что и на mlx.app/compare.