По объему памяти
| Память | Работают хорошо | Самая большая из работающих хорошо | gpt-oss-20b |
|---|---|---|---|
| 24 ГБ273 ГБ/с | 25 | Gemma 4 26B A4B | 65–115 tok/s |
| 48 ГБ273 ГБ/с | 30 | Qwen3.6 35B A3B | 65–115 tok/s |
| 64 ГБ273 ГБ/с | 31 | Nemotron 3.5 Bolt 74B A9B | 65–115 tok/s |
Модели: Mac mini (2024). Не каждый объем памяти доступен в каждой модели; что предлагается для каждой, указано в технических характеристиках Apple.
Вопросы
- Подходит ли Mac mini с чипом M4 Pro для локальных LLM?
- С 64 ГБ он хорошо запускает 31 из 73 открытых моделей, вплоть до Nemotron 3.5 Bolt 74B A9B, и генерирует около 65–115 токенов в секунду с gpt-oss-20b. M4 Pro читает память со скоростью 273 ГБ/с — от этого зависит скорость генерации.
- Mac mini с чипом M4 Pro: сколько памяти нужно для ИИ?
- Открытых моделей, работающих хорошо: 25 при 24 ГБ и 31 при 64 ГБ, вплоть до Nemotron 3.5 Bolt 74B A9B. Объем памяти определяет, какие модели поместятся, и увеличить его потом нельзя.
Другие Mac
Mac mini с другими чипами:
Другие Mac с чипом M4 Pro:
Один на один:
Против ПК и видеокарт:
M4 Pro для локального ИИ · Лучший Mac для локальных LLM · Все Mac
Как это рассчитано
Память: параметры модели при 8, 6, 4, 3 или 2 битах на вес плюс групповые масштабы MLX (полбита на вес) или ее нативный формат, а сверху — место для контекста. По умолчанию macOS отдает GPU около 75% объединенной памяти. Скорость: пропускная способность памяти, деленная на число байтов, читаемых на каждый токен, — это потолок для одного диалога; в публичных тестах llama.cpp на Apple Silicon реальные запуски достигают примерно 45–80% от него, и показан именно этот диапазон. Это оценки, а не измерения: измерьте свой Mac в MLX Bench. Данные моделей — из официальных карточек моделей, данные чипов — из технических характеристик Apple. Проверено 2026-10-19. Те же данные, что и на mlx.app/compare.