За обсягом пам’яті
| Пам’ять | Працюють добре | Найбільша з тих, що працюють добре | gpt-oss-20b |
|---|---|---|---|
| 24 ГБ273 ГБ/с | 25 | Gemma 4 26B A4B | 65–115 tok/s |
| 48 ГБ273 ГБ/с | 30 | Qwen3.6 35B A3B | 65–115 tok/s |
| 64 ГБ273 ГБ/с | 31 | Nemotron 3.5 Bolt 74B A9B | 65–115 tok/s |
Моделі: Mac mini (2024). Не кожен обсяг пам’яті доступний у кожній моделі; що пропонується для кожної, вказано в технічних характеристиках Apple.
Запитання
- Чи підходить Mac mini із чипом M4 Pro для локальних LLM?
- Із 64 ГБ він добре запускає 31 з 73 відкритих моделей, аж до Nemotron 3.5 Bolt 74B A9B, і генерує близько 65–115 токенів за секунду із gpt-oss-20b. M4 Pro читає пам’ять зі швидкістю 273 ГБ/с — від цього залежить швидкість генерації.
- Mac mini із чипом M4 Pro: скільки пам’яті потрібно для ШІ?
- Відкритих моделей, що працюють добре: 25 із 24 ГБ і 31 із 64 ГБ, аж до Nemotron 3.5 Bolt 74B A9B. Обсяг пам’яті визначає, які моделі вмістяться, і збільшити його потім не можна.
Інші Mac
Mac mini з іншими чипами:
Інші Mac із чипом M4 Pro:
Віч-на-віч:
Проти ПК і відеокарт:
M4 Pro для локального ШІ · Найкращий Mac для локальних LLM · Усі Mac
Як це розраховано
Пам’ять: параметри моделі за 8, 6, 4, 3 або 2 біт на вагу плюс групові масштаби MLX (пів біта на вагу) або її нативний формат, а зверху — місце для контексту. За замовчуванням macOS дає GPU близько 75% об’єднаної пам’яті. Швидкість: пропускна здатність пам’яті, поділена на кількість байтів, що читаються на кожен токен, — це стеля для однієї розмови; у публічних тестах llama.cpp на Apple Silicon реальні запуски досягають приблизно 45–80% від неї, і показано саме цей діапазон. Це оцінки, а не вимірювання: виміряйте свій Mac у MLX Bench. Дані моделей — з офіційних карток моделей, дані чипів — з технічних характеристик Apple. Перевірено 2026-10-19. Ті самі дані, що й на mlx.app/compare.