ВойтиСоздать кошелек

Что запустит M4 Pro с 24 ГБ?

На нем хорошо работают 25 из 73 открытых моделей. По умолчанию GPU может использовать около 18 ГБ из 24 ГБ, а память читается со скоростью 273 ГБ/с — от этого зависит скорость генерации. Встречается в: Mac mini (2024), MacBook Pro (14-inch, M4 Pro or M4 Max, 2024), MacBook Pro (16-inch, 2024).

Самая умная из работающих хорошоMiniCPM5 2B8 бит · 2,7 ГБ · 45–81 tok/sСамая большая из работающих хорошоGemma 4 26B A4B4 бит · 14,2 ГБ · 59–104 tok/s

Работают хорошо 30

Помещается с запасом для контекста, 10 и более токенов в секунду.

МодельВерсияПамятьТокенов/с
MiniCPM5 2B2,52B · Интеллект 12,58 бит2,7 ГБ45–81
Qwen3.5 9B9B · Интеллект 11,28 бит9,6 ГБ13–23
Granite 4.2 8B8B · Интеллект 11,18 бит8,5 ГБ14–26
Granite 4.2 3B3B · Интеллект 9,18 бит3,2 ГБ38–68
gpt-oss-20b21B · активных: 3,6B · Интеллект 9нативные 4,25 бит13,8 ГБ65–115
Gemma 4 E4B8B · Интеллект 8,98 бит8,5 ГБ26–46
Ministral 3 8B8,9B · Интеллект 5,58 бит9,5 ГБ13–23
Nemotron 3 Nano 4B3,97B · Интеллект 4,88 бит4,2 ГБ29–52
Gemma 4 26B A4B25,2B · активных: 3,8B4 бит14,2 ГБ59–104
LFM2.5 24B A2B24B · активных: 2B4 бит13,5 ГБ112–199
Phi-4 Reasoning Vision 15B15B6 бит12,2 ГБ10–18
Phi-4 (14B)14B6 бит11,4 ГБ11–19
Gemma 4 12B Unified12B8 бит12,7 ГБ10–17
Qwen3 8B8,2B8 бит8,7 ГБ14–25
Llama 3.1 8B Instruct8B8 бит8,5 ГБ14–26
Gemma 4 E2B5,1B8 бит5,4 ГБ51–91
Qwen3.5 4B4B8 бит4,3 ГБ29–51
Phi-4 mini instruct3,8B8 бит4 ГБ31–55
Llama 3.2 3B Instruct3,21B8 бит3,4 ГБ36–64
SmolLM3 3B3B8 бит3,2 ГБ38–68
LFM2.5 2.6B2,69B8 бит2,9 ГБ42–75
Qwen3.5 2B2B8 бит2,1 ГБ59–104
Llama 3.2 1B Instruct1,23B8 бит1,3 ГБ95–168
Qwen3.5 0.8B0,8B8 бит0,9 ГБ137–243
Qwen3 0.6B0,6B8 бит0,6 ГБ205–364
Qwen3.6 35B A3B35B · активных: 3B · Интеллект 18,23 бит ниже качество15,3 ГБ95–168
Nemotron 3.5 Lightning 30B A3B30B · активных: 3B · Интеллект 12,93 бит ниже качество13,1 ГБ95–168
Nemotron 3 Nano 30B A3B30B · активных: 3,5B · Интеллект 8,93 бит ниже качество13,1 ГБ82–146
Qwen3 Coder 30B A3B Instruct30,5B · активных: 3,3B3 бит ниже качество13,3 ГБ88–156
GLM-4.7 Flash30B · активных: 3B3 бит ниже качество13,1 ГБ95–168

Работают, но медленно 8

Помещается, но меньше 10 токенов в секунду: подойдет для пакетных задач, для чата медленно.

МодельВерсияПамятьТокенов/с
Qwen3.8 27B27B · Интеллект 33,74 бит15,2 ГБ8–14
Qwen3.6 27B27B4 бит15,2 ГБ8–14
Devstral Small 2 (24B)24B4 бит13,5 ГБ9–16
Magistral Small 1.2 (2509)24B4 бит13,5 ГБ9–16
Mistral Small 3.2 (24B)24B4 бит13,5 ГБ9–16
Muse Glimmer 30B29,6B · Интеллект 17,53 бит ниже качество13 ГБ9–17
Gemma 4 31B30,7B · Интеллект 14,73 бит ниже качество13,4 ГБ9–16
Granite 4.2 30B30B · Интеллект 12,73 бит ниже качество13,1 ГБ9–17

Слишком большие 35

Нужно больше 24 ГБ памяти, даже при 2 битах.

Другие Mac

Все Mac с 24 ГБ, на любом чипе.

M4 Pro с другим объемом памяти:

Соседние чипы:

Один на один:

Против ПК и видеокарт:

Сравнить с любым Mac или GPU · M4 Pro для локального ИИ · Лучший Mac для локальных LLM · Все Mac

Вопросы

Какая LLM лучше всего подходит для M4 Pro с 24 ГБ?
Среди моделей с опубликованным Intelligence Index выше всех из тех, что здесь хорошо работают, оценена MiniCPM5 2B: 8 бит, около 45–81 токенов в секунду. Самая большая из хорошо работающих — Gemma 4 26B A4B.
Запустит ли M4 Pro с 24 ГБ Llama 3.3 70B?
Нет: даже при 2 битах ей нужно больше 18 ГБ, которые GPU может использовать по умолчанию.
Насколько быстро gpt-oss-20b работает на M4 Pro?
Около 65–115 токенов в секунду (нативные 4,25 бит) при пропускной способности памяти чипа 273 ГБ/с.

Запускайте их в MLX Harness (бесплатно, открытый код) или через mlx-lm от Apple в Терминале: пошагово.

Как это рассчитано

Память: параметры модели при 8, 6, 4, 3 или 2 битах на вес плюс групповые масштабы MLX (полбита на вес) или ее нативный формат, а сверху — место для контекста. По умолчанию macOS отдает GPU около 75% объединенной памяти. Скорость: пропускная способность памяти, деленная на число байтов, читаемых на каждый токен, — это потолок для одного диалога; в публичных тестах llama.cpp на Apple Silicon реальные запуски достигают примерно 45–80% от него, и показан именно этот диапазон. Это оценки, а не измерения: измерьте свой Mac в MLX Bench. Данные моделей — из официальных карточек моделей, данные чипов — из технических характеристик Apple. Проверено 2026-10-19. Те же данные, что и на mlx.app/compare.

Какие LLM запустит M4 Pro с 24 ГБ? Все модели и скорость