Чи підходить MacBook Pro із чипом M5 Pro для локальних LLM?

Із 64 ГБ він добре запускає 34 з 73 відкритих моделей, аж до Nemotron 3.5 Bolt 74B A9B, і генерує близько 73–129 токенів за секунду із gpt-oss-20b. M5 Pro читає пам’ять зі швидкістю 307 ГБ/с — від цього залежить швидкість генерації.

MacBook Pro із чипом M5 Pro: скільки пам’яті потрібно для ШІ?

Відкритих моделей, що працюють добре: 28 із 24 ГБ і 34 із 64 ГБ, аж до Nemotron 3.5 Bolt 74B A9B. Обсяг пам’яті визначає, які моделі вмістяться, і збільшити його потім не можна.

MacBook Pro M5 Pro для локального ШІ: LLM за обсягом пам’яті

За обсягом пам’яті

Пам’ять	Працюють добре	Найбільша з тих, що працюють добре	gpt-oss-20b
24 ГБ307 ГБ/с	28	Gemma 4 26B A4B	73–129 tok/s
48 ГБ307 ГБ/с	33	Qwen3.6 35B A3B	73–129 tok/s
64 ГБ307 ГБ/с	34	Nemotron 3.5 Bolt 74B A9B	73–129 tok/s

Моделі: MacBook Pro (14-inch, M5 Pro or M5 Max), MacBook Pro (16-inch, M5 Pro or M5 Max). Не кожен обсяг пам’яті доступний у кожній моделі; що пропонується для кожної, вказано в технічних характеристиках Apple.

Запитання

Чи підходить MacBook Pro із чипом M5 Pro для локальних LLM?: Із 64 ГБ він добре запускає 34 з 73 відкритих моделей, аж до Nemotron 3.5 Bolt 74B A9B, і генерує близько 73–129 токенів за секунду із gpt-oss-20b. M5 Pro читає пам’ять зі швидкістю 307 ГБ/с — від цього залежить швидкість генерації.
MacBook Pro із чипом M5 Pro: скільки пам’яті потрібно для ШІ?: Відкритих моделей, що працюють добре: 28 із 24 ГБ і 34 із 64 ГБ, аж до Nemotron 3.5 Bolt 74B A9B. Обсяг пам’яті визначає, які моделі вмістяться, і збільшити його потім не можна.

Інші Mac

MacBook Pro з іншими чипами:

Інші Mac із чипом M5 Pro:

Mac mini M5 Pro

Віч-на-віч:

M5 Pro для локального ШІ · Найкращий Mac для локальних LLM · Усі Mac

Як це розраховано

Пам’ять: параметри моделі за 8, 6, 4, 3 або 2 біт на вагу плюс групові масштаби MLX (пів біта на вагу) або її нативний формат, а зверху — місце для контексту. За замовчуванням macOS дає GPU близько 75% об’єднаної пам’яті. Швидкість: пропускна здатність пам’яті, поділена на кількість байтів, що читаються на кожен токен, — це стеля для однієї розмови; у публічних тестах llama.cpp на Apple Silicon реальні запуски досягають приблизно 45–80% від неї, і показано саме цей діапазон. Це оцінки, а не вимірювання: виміряйте свій Mac у MLX Bench. Дані моделей — з офіційних карток моделей, дані чипів — з технічних характеристик Apple. Перевірено 2026-10-19. Ті самі дані, що й на mlx.app/compare.