1Характеристики, важные для ИИ
| Объединенная память | 128 GB |
|---|---|
| Пропускная способность памяти | 546 GB/s, или 410 GB/s в младшей конфигурации |
| Устанавливается в | 14- and 16-inch MacBook Pro (2024), Mac Studio (2025) |
| Выделенное место для него | Место Pro: добывает до 80 MLX в день |
2Какие модели поместятся
При 4 битах на вес модели нужно чуть больше половины гигабайта на миллиард параметров, плюс место для контекста и macOS. С 128 GB чип M4 Max без труда вмещает модели примерно до 170 млрд параметров.
| Модель (4 бита) | Нужно памяти | Поместится на M4 Max |
|---|---|---|
| Модель 8B | 4,5 GB | Да |
| Модель 14B | 7,9 GB | Да |
| Модель 32B | 18 GB | Да |
| Модель 70B | 39,4 GB | Да |
| gpt-oss-120b, смесь экспертов (MoE) | 65 GB | Да |
| Qwen3.5-397B-A17B, смесь экспертов (MoE) | 223,3 GB | Нет |
| DeepSeek-V4.1-Flash, смесь экспертов (MoE) | 316 GB | Нет |
3Насколько быстро
Генерация текста упирается в пропускную способность памяти: для каждого нового токена активные веса модели читаются один раз. Разделив 546 GB/s чипа M4 Max на объем, читаемый за токен, получаем потолок ниже. Реальные запуски обычно достигают примерно 45–80% от него (тесты llama.cpp).
| Модель (4 бита) | Чтение на токен | Потолок для одного чата |
|---|---|---|
| Модель 8B | 4,5 GB | 121 токенов/с |
| Модель 14B | 7,9 GB | 69 токенов/с |
| Модель 32B | 18 GB | 30 токенов/с |
| Модель 70B | 39,4 GB | 14 токенов/с |
| gpt-oss-120b, смесь экспертов (MoE) | 2,7 GB | 202 токенов/с |
Измерено: на M4 Max (40-core GPU) llama.cpp в своих открытых тестах выдает 83 токенов/с с Llama-2-7B (Q4_0).
5Сравнение с другими чипами
6Вопросы
- Потянет ли M4 Max модель 70B?
- Да. Модели 70B при 4 битах нужно около 40 GB, а у чипа M4 Max до 128 GB. Потолок для одного чата — около 14 токенов/с.
- Сколько токенов в секунду выдает M4 Max?
- Для модели 8B при 4 битах потолок — около 121 токенов/с, а реальные запуски достигают примерно от половины до четырех пятых от него. Модели крупнее пропорционально медленнее.
- Подходит ли M4 Max для ИИ?
- Для локального запуска моделей важнее всего память и пропускная способность. У чипа M4 Max до 128 GB при 546 GB/s — этого хватает для моделей примерно до 170 млрд параметров. Кроме того, Mac с этим чипом может зарабатывать, выполняя задачи ИИ для MLX Network в MLX Node.
Источники
- Apple: M4 Pro and M4 Maxapple.com
- llama.cpp: Apple Silicon benchmarksgithub.com