Чи запуститься Gemma 4 26B A4B на Mac?

Так, із 24 ГБ об’єднаної пам’яті або більше. У Gemma 4 26B A4B 25,2B параметрів, з них 3,8B активні для кожного токена. Нижче — скільки пам’яті їй потрібно за кожної точності і з якою швидкістю її запускає кожен чип Apple.

Пам’ять (4 біт)15,7 ГБваги 14,2 ГБ + контекст
Мінімальний Mac24 ГБ4 біт · конфігурацій Mac: 55
Найшвидший Mac135–240токенів/с · M5 Ultra 96 ГБ (оцінка)

Пам’ять за кожної точності

ВерсіяВагиЗ контекстомМінімальний Mac
8 біт26,8 ГБ28,9 ГБ48 ГБ
6 біт20,5 ГБ22,1 ГБ32 ГБ
4 біт14,2 ГБ15,7 ГБ24 ГБ
3 біт нижча якість11 ГБ12,5 ГБ18 ГБ
2 біт нижча якість7,9 ГБ9,4 ГБ16 ГБ

На кожному чипі Apple

Мінімальний обсяг пам’яті кожного чипа, на якому запускається Gemma 4 26B A4B, найкраща версія, що вміщується, і очікувана швидкість генерації.

ЧипПотрібноВерсіяТокенів/с
M624 ГБ4 біт Працює добре36–65
M5 Ultra96 ГБ8 біт Працює добре135–240
M5 Max36 ГБ6 біт Працює добре67–119
M5 Pro24 ГБ4 біт Працює добре66–117
M524 ГБ4 біт Працює добре33–58
M4 Max36 ГБ6 біт Працює добре60–106
M4 Pro24 ГБ4 біт Працює добре59–104
M424 ГБ4 біт Працює добре26–46
M3 Ultra96 ГБ8 біт Працює добре92–164
M3 Max36 ГБ6 біт Працює добре44–77
M3 Pro36 ГБ6 біт Працює добре22–39
M324 ГБ4 біт Працює добре21–38
M2 Ultra64 ГБ8 біт Працює добре90–160
M2 Max32 ГБ6 біт Працює добре58–103
M2 Pro32 ГБ6 біт Працює добре29–52
M224 ГБ4 біт Працює добре21–38
M1 Ultra64 ГБ8 біт Працює добре90–160
M1 Max32 ГБ6 біт Працює добре58–103
M1 Pro32 ГБ6 біт Працює добре29–52
M116 ГБ2 біт Працює добре26–45

Як запустити

  1. Найпростіший спосіб: завантажте MLX Harness — безкоштовно і з відкритим кодом. Знайдіть Gemma 4 26B A4B, завантажте версію, яка підходить вашому Mac, і спілкуйтеся. Застосунок також віддає модель іншим вашим програмам через API, сумісний з OpenAI.Завантажити MLX HarnessБезкоштовно · Apple Silicon · macOS 14.5 або новіша
  2. У Терміналі з MLX від Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/gemma-4-26b-a4b-it-4bitЗбірка: mlx-community/gemma-4-26b-a4b-it-4bit на Hugging Face. Поруч лежать версії з іншою точністю.

Покроково: завантажити й запустити LLM на Mac · як користуватися MLX Harness · MLX, Ollama і llama.cpp

Про модель Gemma 4 26B A4B

РозробникGoogle DeepMind
Параметри25,2B усього · 3,8B активних (mixture of experts)
Контексттокенів: 256K
ЛіцензіяApache-2.0
Випуск2026-03
Вхідні даніТекст і зображення
Вагиgoogle/gemma-4-26B-A4B-it

Запитання

Скільки пам’яті потрібно моделі Gemma 4 26B A4B?
Близько 14,2 ГБ на ваги (4 біт) плюс місце для контексту: загалом 15,7 ГБ. На Mac це означає 24 ГБ об’єднаної пам’яті або більше, адже за замовчуванням macOS дає GPU близько 75% пам’яті.
Наскільки швидко Gemma 4 26B A4B працює на Mac?
Швидкість генерації залежить від пропускної здатності пам’яті. Найшвидший Mac для неї тут — M5 Ultra із 96 ГБ: близько 135–240 токенів за секунду (8 біт). Мінімальний Mac, що її запускає, — M5 Pro із 24 ГБ — видає близько 66–117.
Чому Gemma 4 26B A4B працює швидше, ніж можна очікувати з її розміру?
Це модель mixture-of-experts: вона тримає в пам’яті 25,2B параметрів, але на кожен токен читає лише 3,8B, тож пише зі швидкістю значно меншої моделі.

Схожі моделі

Усі моделі · Усі Mac · Порівняти свій Mac

Для картки моделі або README

Runs on a Mac: Gemma 4 26B A4B Показує мінімальний Mac, на якому Gemma 4 26B A4B добре працює, і веде сюди.

[![Runs on a Mac](https://mlx.app/badge/run/gemma-4-26b-a4b.svg)](https://mlx.app/run/gemma-4-26b-a4b)

Як це розраховано

Пам’ять: параметри моделі за 8, 6, 4, 3 або 2 біт на вагу плюс групові масштаби MLX (пів біта на вагу) або її нативний формат, а зверху — місце для контексту. За замовчуванням macOS дає GPU близько 75% об’єднаної пам’яті. Швидкість: пропускна здатність пам’яті, поділена на кількість байтів, що читаються на кожен токен, — це стеля для однієї розмови; у публічних тестах llama.cpp на Apple Silicon реальні запуски досягають приблизно 45–80% від неї, і показано саме цей діапазон. Це оцінки, а не вимірювання: виміряйте свій Mac у MLX Bench. Дані моделей — з офіційних карток моделей, дані чипів — з технічних характеристик Apple. Перевірено 2026-10-19. Ті самі дані, що й на mlx.app/compare.

Чи потягне Mac Gemma 4 26B A4B? Пам’ять і швидкість