Чи запуститься Llama 4 Maverick 17B-128E Instruct на Mac?

Так, із 512 ГБ об’єднаної пам’яті або більше. У Llama 4 Maverick 17B-128E Instruct 400B параметрів, з них 17B активні для кожного токена. Нижче — скільки пам’яті їй потрібно за кожної точності і з якою швидкістю її запускає кожен чип Apple.

Пам’ять (4 біт)243 ГБваги 225 ГБ + контекст
Мінімальний Mac512 ГБ6 біт · конфігурацій Mac: 5
Найшвидший Mac39–70токенів/с · M5 Ultra 512 ГБ (оцінка)

Пам’ять за кожної точності

ВерсіяВагиЗ контекстомМінімальний Mac
8 біт425 ГБ459 ГБбільше, ніж має будь-який Mac
6 біт325 ГБ351 ГБ512 ГБ
4 біт225 ГБ243 ГБ512 ГБ
3 біт нижча якість175 ГБ189 ГБ256 ГБ
2 біт нижча якість125 ГБ135 ГБ192 ГБ

На кожному чипі Apple

Мінімальний обсяг пам’яті кожного чипа, на якому запускається Llama 4 Maverick 17B-128E Instruct, найкраща версія, що вміщується, і очікувана швидкість генерації.

ЧипПотрібноВерсіяТокенів/с
M6жоден обсяг не підходитьЗавелика–
M5 Ultra512 ГБ6 біт Працює добре39–70
M5 Maxжоден обсяг не підходитьЗавелика–
M5 Proжоден обсяг не підходитьЗавелика–
M5жоден обсяг не підходитьЗавелика–
M4 Maxжоден обсяг не підходитьЗавелика–
M4 Proжоден обсяг не підходитьЗавелика–
M4жоден обсяг не підходитьЗавелика–
M3 Ultra512 ГБ6 біт Працює добре27–47
M3 Maxжоден обсяг не підходитьЗавелика–
M3 Proжоден обсяг не підходитьЗавелика–
M3жоден обсяг не підходитьЗавелика–
M2 Ultra192 ГБ2 біт Працює добре68–121
M2 Maxжоден обсяг не підходитьЗавелика–
M2 Proжоден обсяг не підходитьЗавелика–
M2жоден обсяг не підходитьЗавелика–
M1 Ultraжоден обсяг не підходитьЗавелика–
M1 Maxжоден обсяг не підходитьЗавелика–
M1 Proжоден обсяг не підходитьЗавелика–
M1жоден обсяг не підходитьЗавелика–

Як запустити

  1. Найпростіший спосіб: завантажте MLX Harness — безкоштовно і з відкритим кодом. Знайдіть Llama 4 Maverick 17B-128E Instruct, завантажте версію, яка підходить вашому Mac, і спілкуйтеся. Застосунок також віддає модель іншим вашим програмам через API, сумісний з OpenAI.Завантажити MLX HarnessБезкоштовно · Apple Silicon · macOS 14.5 або новіша
  2. У Терміналі з MLX від Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bitЗбірка: mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bit на Hugging Face. Поруч лежать версії з іншою точністю.

Покроково: завантажити й запустити LLM на Mac · як користуватися MLX Harness · MLX, Ollama і llama.cpp

Про модель Llama 4 Maverick 17B-128E Instruct

РозробникMeta
Параметри400B усього · 17B активних (mixture of experts)
Контексттокенів: 1M
ЛіцензіяLlama 4 Community License
Випуск2025-04
Вхідні даніТекст і зображення
Інтелект9,3 в Artificial Analysis Intelligence Index
Вагиmeta-llama/Llama-4-Maverick-17B-128E-Instruct

Запитання

Скільки пам’яті потрібно моделі Llama 4 Maverick 17B-128E Instruct?
Близько 225 ГБ на ваги (4 біт) плюс місце для контексту: загалом 243 ГБ. На Mac це означає 512 ГБ об’єднаної пам’яті або більше, адже за замовчуванням macOS дає GPU близько 75% пам’яті.
Наскільки швидко Llama 4 Maverick 17B-128E Instruct працює на Mac?
Швидкість генерації залежить від пропускної здатності пам’яті. Найшвидший Mac для неї тут — M5 Ultra із 512 ГБ: близько 39–70 токенів за секунду (6 біт). Мінімальний Mac, що її запускає, — M5 Ultra із 512 ГБ — видає близько 39–70.
Чому Llama 4 Maverick 17B-128E Instruct працює швидше, ніж можна очікувати з її розміру?
Це модель mixture-of-experts: вона тримає в пам’яті 400B параметрів, але на кожен токен читає лише 17B, тож пише зі швидкістю значно меншої моделі.

Схожі моделі

Усі моделі · Усі Mac · Порівняти свій Mac

Для картки моделі або README

Runs on a Mac: Llama 4 Maverick 17B-128E Instruct Показує мінімальний Mac, на якому Llama 4 Maverick 17B-128E Instruct добре працює, і веде сюди.

[![Runs on a Mac](https://mlx.app/badge/run/llama-4-maverick.svg)](https://mlx.app/run/llama-4-maverick)

Як це розраховано

Пам’ять: параметри моделі за 8, 6, 4, 3 або 2 біт на вагу плюс групові масштаби MLX (пів біта на вагу) або її нативний формат, а зверху — місце для контексту. За замовчуванням macOS дає GPU близько 75% об’єднаної пам’яті. Швидкість: пропускна здатність пам’яті, поділена на кількість байтів, що читаються на кожен токен, — це стеля для однієї розмови; у публічних тестах llama.cpp на Apple Silicon реальні запуски досягають приблизно 45–80% від неї, і показано саме цей діапазон. Це оцінки, а не вимірювання: виміряйте свій Mac у MLX Bench. Дані моделей — з офіційних карток моделей, дані чипів — з технічних характеристик Apple. Перевірено 2026-10-19. Ті самі дані, що й на mlx.app/compare.

Чи потягне Mac Llama 4 Maverick 17B-128E Instruct? Пам’ять і швидкість