Чи запуститься Qwen3 Coder 30B A3B Instruct на Mac?

Так, із 32 ГБ об’єднаної пам’яті або більше. У Qwen3 Coder 30B A3B Instruct 30,5B параметрів, з них 3,3B активні для кожного токена. Нижче — скільки пам’яті їй потрібно за кожної точності і з якою швидкістю її запускає кожен чип Apple.

Пам’ять (4 біт)18,7 ГБваги 17,2 ГБ + контекст
Мінімальний Mac32 ГБ4 біт · конфігурацій Mac: 55
Найшвидший Mac154–274токенів/с · M5 Ultra 96 ГБ (оцінка)

Пам’ять за кожної точності

ВерсіяВагиЗ контекстомМінімальний Mac
8 біт32,4 ГБ35 ГБ48 ГБ
6 біт24,8 ГБ26,8 ГБ36 ГБ
4 біт17,2 ГБ18,7 ГБ32 ГБ
3 біт нижча якість13,3 ГБ14,8 ГБ24 ГБ
2 біт нижча якість9,5 ГБ11 ГБ16 ГБ

На кожному чипі Apple

Мінімальний обсяг пам’яті кожного чипа, на якому запускається Qwen3 Coder 30B A3B Instruct, найкраща версія, що вміщується, і очікувана швидкість генерації.

ЧипПотрібноВерсіяТокенів/с
M632 ГБ4 біт Працює добре40–72
M5 Ultra96 ГБ8 біт Працює добре154–274
M5 Max36 ГБ6 біт Працює добре77–136
M5 Pro48 ГБ8 біт Працює добре39–70
M532 ГБ4 біт Працює добре36–64
M4 Max36 ГБ6 біт Працює добре68–121
M4 Pro48 ГБ8 біт Працює добре35–62
M432 ГБ4 біт Працює добре28–51
M3 Ultra96 ГБ8 біт Працює добре105–187
M3 Max36 ГБ6 біт Працює добре50–89
M3 Pro36 ГБ6 біт Працює добре25–44
M316 ГБ2 біт Працює добре45–80
M2 Ultra64 ГБ8 біт Працює добре103–183
M2 Max32 ГБ4 біт Працює добре95–168
M2 Pro32 ГБ4 біт Працює добре47–84
M216 ГБ2 біт Працює добре45–80
M1 Ultra64 ГБ8 біт Працює добре103–183
M1 Max32 ГБ4 біт Працює добре95–168
M1 Pro32 ГБ4 біт Працює добре47–84
M116 ГБ2 біт Працює добре31–54

Як запустити

  1. Найпростіший спосіб: завантажте MLX Harness — безкоштовно і з відкритим кодом. Знайдіть Qwen3 Coder 30B A3B Instruct, завантажте версію, яка підходить вашому Mac, і спілкуйтеся. Застосунок також віддає модель іншим вашим програмам через API, сумісний з OpenAI.Завантажити MLX HarnessБезкоштовно · Apple Silicon · macOS 14.5 або новіша
  2. У Терміналі з MLX від Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/Qwen3-Coder-30B-A3B-Instruct-4bitЗбірка: mlx-community/Qwen3-Coder-30B-A3B-Instruct-4bit на Hugging Face. Поруч лежать версії з іншою точністю.

Покроково: завантажити й запустити LLM на Mac · як користуватися MLX Harness · MLX, Ollama і llama.cpp

Про модель Qwen3 Coder 30B A3B Instruct

РозробникQwen (Alibaba)
Параметри30,5B усього · 3,3B активних (mixture of experts)
Контексттокенів: 256K
ЛіцензіяApache-2.0
Випуск2025-07
Вхідні даніТекст
ВагиQwen/Qwen3-Coder-30B-A3B-Instruct

Запитання

Скільки пам’яті потрібно моделі Qwen3 Coder 30B A3B Instruct?
Близько 17,2 ГБ на ваги (4 біт) плюс місце для контексту: загалом 18,7 ГБ. На Mac це означає 32 ГБ об’єднаної пам’яті або більше, адже за замовчуванням macOS дає GPU близько 75% пам’яті.
Наскільки швидко Qwen3 Coder 30B A3B Instruct працює на Mac?
Швидкість генерації залежить від пропускної здатності пам’яті. Найшвидший Mac для неї тут — M5 Ultra із 96 ГБ: близько 154–274 токенів за секунду (8 біт). Мінімальний Mac, що її запускає, — M2 Max із 32 ГБ — видає близько 95–168.
Чому Qwen3 Coder 30B A3B Instruct працює швидше, ніж можна очікувати з її розміру?
Це модель mixture-of-experts: вона тримає в пам’яті 30,5B параметрів, але на кожен токен читає лише 3,3B, тож пише зі швидкістю значно меншої моделі.

Схожі моделі

Усі моделі · Усі Mac · Порівняти свій Mac

Для картки моделі або README

Runs on a Mac: Qwen3 Coder 30B A3B Instruct Показує мінімальний Mac, на якому Qwen3 Coder 30B A3B Instruct добре працює, і веде сюди.

[![Runs on a Mac](https://mlx.app/badge/run/qwen3-coder-30b-a3b.svg)](https://mlx.app/run/qwen3-coder-30b-a3b)

Як це розраховано

Пам’ять: параметри моделі за 8, 6, 4, 3 або 2 біт на вагу плюс групові масштаби MLX (пів біта на вагу) або її нативний формат, а зверху — місце для контексту. За замовчуванням macOS дає GPU близько 75% об’єднаної пам’яті. Швидкість: пропускна здатність пам’яті, поділена на кількість байтів, що читаються на кожен токен, — це стеля для однієї розмови; у публічних тестах llama.cpp на Apple Silicon реальні запуски досягають приблизно 45–80% від неї, і показано саме цей діапазон. Це оцінки, а не вимірювання: виміряйте свій Mac у MLX Bench. Дані моделей — з офіційних карток моделей, дані чипів — з технічних характеристик Apple. Перевірено 2026-10-19. Ті самі дані, що й на mlx.app/compare.

Чи потягне Mac Qwen3 Coder 30B A3B Instruct? Пам’ять і швидкість