Чи запуститься Phi-4 (14B) на Mac?

Так, із 16 ГБ об’єднаної пам’яті або більше. У Phi-4 (14B) 14B параметрів. Нижче — скільки пам’яті їй потрібно за кожної точності і з якою швидкістю її запускає кожен чип Apple.

Пам’ять (4 біт)9,4 ГБваги 7,9 ГБ + контекст
Мінімальний Mac16 ГБ4 біт · конфігурацій Mac: 58
Найшвидший Mac36–64токенів/с · M5 Ultra 96 ГБ (оцінка)

Пам’ять за кожної точності

ВерсіяВагиЗ контекстомМінімальний Mac
8 біт14,9 ГБ16,4 ГБ24 ГБ
6 біт11,4 ГБ12,9 ГБ18 ГБ
4 біт7,9 ГБ9,4 ГБ16 ГБ
3 біт нижча якість6,1 ГБ7,6 ГБ16 ГБ
2 біт нижча якість4,4 ГБ5,9 ГБ8 ГБ

На кожному чипі Apple

Мінімальний обсяг пам’яті кожного чипа, на якому запускається Phi-4 (14B), найкраща версія, що вміщується, і очікувана швидкість генерації.

ЧипПотрібноВерсіяТокенів/с
M616 ГБ4 біт Повільно9–15
M5 Ultra96 ГБ8 біт Працює добре36–64
M5 Max36 ГБ8 біт Працює добре14–25
M5 Pro24 ГБ6 біт Працює добре12–22
M516 ГБ4 біт Повільно9–15
M4 Max36 ГБ8 біт Працює добре12–22
M4 Pro24 ГБ6 біт Працює добре11–19
M416 ГБ4 біт Повільно7–12
M3 Ultra96 ГБ8 біт Працює добре25–44
M3 Max36 ГБ6 біт Працює добре12–21
M3 Pro18 ГБ6 біт Повільно6–11
M316 ГБ4 біт Повільно6–10
M2 Ultra64 ГБ8 біт Працює добре24–43
M2 Max32 ГБ8 біт Працює добре12–21
M2 Pro16 ГБ4 біт Працює добре11–20
M216 ГБ4 біт Повільно6–10
M1 Ultra64 ГБ8 біт Працює добре24–43
M1 Max32 ГБ8 біт Працює добре12–21
M1 Pro16 ГБ4 біт Працює добре11–20
M116 ГБ4 біт Повільно4–7

Як запустити

  1. Найпростіший спосіб: завантажте MLX Harness — безкоштовно і з відкритим кодом. Знайдіть Phi-4 (14B), завантажте версію, яка підходить вашому Mac, і спілкуйтеся. Застосунок також віддає модель іншим вашим програмам через API, сумісний з OpenAI.Завантажити MLX HarnessБезкоштовно · Apple Silicon · macOS 14.5 або новіша
  2. У Терміналі з MLX від Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/phi-4-4bitЗбірка: mlx-community/phi-4-4bit на Hugging Face. Поруч лежать версії з іншою точністю.

Покроково: завантажити й запустити LLM на Mac · як користуватися MLX Harness · MLX, Ollama і llama.cpp

Про модель Phi-4 (14B)

РозробникMicrosoft
Параметри14B (щільна)
Контексттокенів: 16K
ЛіцензіяMIT
Випуск2024-12
Вхідні даніТекст
Вагиmicrosoft/phi-4

Запитання

Скільки пам’яті потрібно моделі Phi-4 (14B)?
Близько 7,9 ГБ на ваги (4 біт) плюс місце для контексту: загалом 9,4 ГБ. На Mac це означає 16 ГБ об’єднаної пам’яті або більше, адже за замовчуванням macOS дає GPU близько 75% пам’яті.
Наскільки швидко Phi-4 (14B) працює на Mac?
Швидкість генерації залежить від пропускної здатності пам’яті. Найшвидший Mac для неї тут — M5 Ultra із 96 ГБ: близько 36–64 токенів за секунду (8 біт). Мінімальний Mac, що її запускає, — M2 Pro із 16 ГБ — видає близько 11–20.
Чи погіршує квантування Phi-4 (14B)?
За 4 біт більшість моделей лишаються близькими до початкової якості; нижче 4 біт якість падає швидше. Обирайте найвищу точність, яка вміщується у ваш Mac із запасом.

Схожі моделі

Усі моделі · Усі Mac · Порівняти свій Mac

Для картки моделі або README

Runs on a Mac: Phi-4 (14B) Показує мінімальний Mac, на якому Phi-4 (14B) добре працює, і веде сюди.

[![Runs on a Mac](https://mlx.app/badge/run/phi-4.svg)](https://mlx.app/run/phi-4)

Як це розраховано

Пам’ять: параметри моделі за 8, 6, 4, 3 або 2 біт на вагу плюс групові масштаби MLX (пів біта на вагу) або її нативний формат, а зверху — місце для контексту. За замовчуванням macOS дає GPU близько 75% об’єднаної пам’яті. Швидкість: пропускна здатність пам’яті, поділена на кількість байтів, що читаються на кожен токен, — це стеля для однієї розмови; у публічних тестах llama.cpp на Apple Silicon реальні запуски досягають приблизно 45–80% від неї, і показано саме цей діапазон. Це оцінки, а не вимірювання: виміряйте свій Mac у MLX Bench. Дані моделей — з офіційних карток моделей, дані чипів — з технічних характеристик Apple. Перевірено 2026-10-19. Ті самі дані, що й на mlx.app/compare.

Чи потягне Mac Phi-4 (14B)? Пам’ять і швидкість