Per geheugengrootte
| Geheugen | Draaien goed | Grootste dat goed draait | gpt-oss-20b |
|---|---|---|---|
| 16 GB153 GB/s | 20 | Gemma 4 12B Unified | 43–77 tok/s |
| 24 GB170 GB/s | 24 | Gemma 4 26B A4B | 40–72 tok/s |
| 32 GB170 GB/s | 29 | Qwen3.6 35B A3B | 40–72 tok/s |
Modellen: Mac mini (M6 or M5 Pro). Niet elke geheugengrootte is bij elk model leverbaar; de technische specificaties van Apple vermelden waarmee elk model komt.
Vragen
- Is de Mac mini met M6 goed voor lokale LLM's?
- Met 32 GB draait hij 29 van de 73 open modellen goed, tot Qwen3.6 35B A3B, en schrijft hij ongeveer 40–72 tokens per seconde met gpt-oss-20b. De M6 leest het geheugen met 170 GB/s; dat bepaalt hoe snel hij schrijft.
- Hoeveel geheugen moet een Mac mini met M6 hebben voor AI?
- Met 16 GB draait hij 20 open modellen goed; met 32 GB 29, tot Qwen3.6 35B A3B. Het geheugen bepaalt welke modellen passen en kan later niet worden uitgebreid.
Andere Macs
De Mac mini met andere chips:
Rechtstreeks vergeleken:
De M6 voor lokale AI · De beste Mac voor lokale LLM's · Alle Macs
Zo is het berekend
Geheugen: de parameters van het model op 8, 6, 4, 3 of 2 bits per gewicht plus de groepsschalen van MLX (een halve bit per gewicht), of het eigen formaat van het model, met daarbovenop ruimte voor de context. Standaard laat macOS de GPU ongeveer 75% van het geïntegreerde geheugen gebruiken. Snelheid: de geheugenbandbreedte gedeeld door het aantal bytes dat per token wordt gelezen, is het plafond voor één gesprek; in de openbare Apple Silicon-benchmarks van llama.cpp halen echte runs ongeveer 45% tot 80% daarvan, en dat is het bereik dat we tonen. Dit zijn schattingen, geen metingen: meet je eigen Mac op MLX Bench. Modelgegevens uit elke officiële modelkaart, chipgegevens uit de technische specificaties van Apple. Gecontroleerd op 2026-10-19. Dezelfde gegevens als mlx.app/compare.