Чи запуститься LFM2.5 24B A2B на Mac?

Так, із 24 ГБ об’єднаної пам’яті або більше. У LFM2.5 24B A2B 24B параметрів, з них 2B активні для кожного токена. Нижче — скільки пам’яті їй потрібно за кожної точності і з якою швидкістю її запускає кожен чип Apple.

Пам’ять (4 біт)15 ГБваги 13,5 ГБ + контекст
Мінімальний Mac24 ГБ4 біт · конфігурацій Mac: 55
Найшвидший Mac257–457токенів/с · M5 Ultra 96 ГБ (оцінка)

Пам’ять за кожної точності

ВерсіяВагиЗ контекстомМінімальний Mac
8 біт25,5 ГБ27,5 ГБ48 ГБ
6 біт19,5 ГБ21,1 ГБ32 ГБ
4 біт13,5 ГБ15 ГБ24 ГБ
3 біт нижча якість10,5 ГБ12 ГБ16 ГБ
2 біт нижча якість7,5 ГБ9 ГБ16 ГБ

На кожному чипі Apple

Мінімальний обсяг пам’яті кожного чипа, на якому запускається LFM2.5 24B A2B, найкраща версія, що вміщується, і очікувана швидкість генерації.

ЧипПотрібноВерсіяТокенів/с
M624 ГБ4 біт Працює добре70–124
M5 Ultra96 ГБ8 біт Працює добре257–457
M5 Max36 ГБ6 біт Працює добре129–230
M5 Pro24 ГБ4 біт Працює добре126–223
M524 ГБ4 біт Працює добре63–111
M4 Max36 ГБ6 біт Працює добре115–205
M4 Pro24 ГБ4 біт Працює добре112–199
M424 ГБ4 біт Працює добре49–87
M3 Ultra96 ГБ8 біт Працює добре176–312
M3 Max36 ГБ6 біт Працює добре84–150
M3 Pro36 ГБ6 біт Працює добре42–75
M324 ГБ4 біт Працює добре41–73
M2 Ultra64 ГБ8 біт Працює добре171–305
M2 Max32 ГБ6 біт Працює добре113–200
M2 Pro32 ГБ6 біт Працює добре56–100
M224 ГБ4 біт Працює добре41–73
M1 Ultra64 ГБ8 біт Працює добре171–305
M1 Max32 ГБ6 біт Працює добре113–200
M1 Pro32 ГБ6 біт Працює добре56–100
M116 ГБ3 біт Працює добре34–60

Як запустити

  1. Найпростіший спосіб: завантажте MLX Harness — безкоштовно і з відкритим кодом. Знайдіть LFM2.5 24B A2B, завантажте версію, яка підходить вашому Mac, і спілкуйтеся. Застосунок також віддає модель іншим вашим програмам через API, сумісний з OpenAI.Завантажити MLX HarnessБезкоштовно · Apple Silicon · macOS 14.5 або новіша
  2. У Терміналі з MLX від Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/LFM2.5-24B-A2B-OptiQ-4bitЗбірка: mlx-community/LFM2.5-24B-A2B-OptiQ-4bit на Hugging Face. Поруч лежать версії з іншою точністю.

Покроково: завантажити й запустити LLM на Mac · як користуватися MLX Harness · MLX, Ollama і llama.cpp

Про модель LFM2.5 24B A2B

РозробникLiquid AI
Параметри24B усього · 2B активних (mixture of experts)
Контексттокенів: 128K
ЛіцензіяLFM Open License v1.0 (lfm1.0)
Випуск2026-10
Вхідні даніТекст
ВагиLiquidAI/LFM2.5-24B-A2B

Запитання

Скільки пам’яті потрібно моделі LFM2.5 24B A2B?
Близько 13,5 ГБ на ваги (4 біт) плюс місце для контексту: загалом 15 ГБ. На Mac це означає 24 ГБ об’єднаної пам’яті або більше, адже за замовчуванням macOS дає GPU близько 75% пам’яті.
Наскільки швидко LFM2.5 24B A2B працює на Mac?
Швидкість генерації залежить від пропускної здатності пам’яті. Найшвидший Mac для неї тут — M5 Ultra із 96 ГБ: близько 257–457 токенів за секунду (8 біт). Мінімальний Mac, що її запускає, — M5 Pro із 24 ГБ — видає близько 126–223.
Чому LFM2.5 24B A2B працює швидше, ніж можна очікувати з її розміру?
Це модель mixture-of-experts: вона тримає в пам’яті 24B параметрів, але на кожен токен читає лише 2B, тож пише зі швидкістю значно меншої моделі.

Схожі моделі

Усі моделі · Усі Mac · Порівняти свій Mac

Для картки моделі або README

Runs on a Mac: LFM2.5 24B A2B Показує мінімальний Mac, на якому LFM2.5 24B A2B добре працює, і веде сюди.

[![Runs on a Mac](https://mlx.app/badge/run/lfm2.5-24b-a2b.svg)](https://mlx.app/run/lfm2.5-24b-a2b)

Як це розраховано

Пам’ять: параметри моделі за 8, 6, 4, 3 або 2 біт на вагу плюс групові масштаби MLX (пів біта на вагу) або її нативний формат, а зверху — місце для контексту. За замовчуванням macOS дає GPU близько 75% об’єднаної пам’яті. Швидкість: пропускна здатність пам’яті, поділена на кількість байтів, що читаються на кожен токен, — це стеля для однієї розмови; у публічних тестах llama.cpp на Apple Silicon реальні запуски досягають приблизно 45–80% від неї, і показано саме цей діапазон. Це оцінки, а не вимірювання: виміряйте свій Mac у MLX Bench. Дані моделей — з офіційних карток моделей, дані чипів — з технічних характеристик Apple. Перевірено 2026-10-19. Ті самі дані, що й на mlx.app/compare.

Чи потягне Mac LFM2.5 24B A2B? Пам’ять і швидкість