Чи підходить Mac Studio із чипом M2 Max для локальних LLM?

Із 96 ГБ він добре запускає 43 з 73 відкритих моделей, аж до gpt-oss-120b, і генерує близько 95–168 токенів за секунду із gpt-oss-20b. M2 Max читає пам’ять зі швидкістю 400 ГБ/с — від цього залежить швидкість генерації.

Mac Studio із чипом M2 Max: скільки пам’яті потрібно для ШІ?

Відкритих моделей, що працюють добре: 38 із 32 ГБ і 43 із 96 ГБ, аж до gpt-oss-120b. Обсяг пам’яті визначає, які моделі вмістяться, і збільшити його потім не можна.

Mac Studio M2 Max для локального ШІ: LLM за обсягом пам’яті

За обсягом пам’яті

Пам’ять	Працюють добре	Найбільша з тих, що працюють добре	gpt-oss-20b
32 ГБ400 ГБ/с	38	Qwen3.6 35B A3B	95–168 tok/s
64 ГБ400 ГБ/с	39	Nemotron 3.5 Bolt 74B A9B	95–168 tok/s
96 ГБ400 ГБ/с	43	gpt-oss-120b	95–168 tok/s

Моделі: Mac Studio (2023). Не кожен обсяг пам’яті доступний у кожній моделі; що пропонується для кожної, вказано в технічних характеристиках Apple.

Запитання

Чи підходить Mac Studio із чипом M2 Max для локальних LLM?: Із 96 ГБ він добре запускає 43 з 73 відкритих моделей, аж до gpt-oss-120b, і генерує близько 95–168 токенів за секунду із gpt-oss-20b. M2 Max читає пам’ять зі швидкістю 400 ГБ/с — від цього залежить швидкість генерації.
Mac Studio із чипом M2 Max: скільки пам’яті потрібно для ШІ?: Відкритих моделей, що працюють добре: 38 із 32 ГБ і 43 із 96 ГБ, аж до gpt-oss-120b. Обсяг пам’яті визначає, які моделі вмістяться, і збільшити його потім не можна.

Інші Mac

Mac Studio з іншими чипами:

Інші Mac із чипом M2 Max:

MacBook Pro M2 Max

Віч-на-віч:

M2 Max для локального ШІ · Найкращий Mac для локальних LLM · Усі Mac

Як це розраховано

Пам’ять: параметри моделі за 8, 6, 4, 3 або 2 біт на вагу плюс групові масштаби MLX (пів біта на вагу) або її нативний формат, а зверху — місце для контексту. За замовчуванням macOS дає GPU близько 75% об’єднаної пам’яті. Швидкість: пропускна здатність пам’яті, поділена на кількість байтів, що читаються на кожен токен, — це стеля для однієї розмови; у публічних тестах llama.cpp на Apple Silicon реальні запуски досягають приблизно 45–80% від неї, і показано саме цей діапазон. Це оцінки, а не вимірювання: виміряйте свій Mac у MLX Bench. Дані моделей — з офіційних карток моделей, дані чипів — з технічних характеристик Apple. Перевірено 2026-10-19. Ті самі дані, що й на mlx.app/compare.