De M5 Max voor lokale AI.

De M5 Max heeft tot 128 GB geïntegreerd geheugen, dat hij met tot 614 GB/s leest. Hier lees je wat dat betekent voor het draaien van taalmodellen op een Mac met deze chip, berekend op basis van de cijfers van Apple zelf.

1De specificaties die tellen voor AI

Geïntegreerd geheugen128 GB
Geheugenbandbreedte614 GB/s, of 460 GB/s bij de lagere configuratie
Zit in14- and 16-inch MacBook Pro (2026), Mac Studio (2026)
Vaste plek ervoorPro Latest-plek: delft tot 120 MLX per dag

2Welke modellen passen

Bij 4 bits per gewicht heeft een model iets meer dan een halve gigabyte per miljard parameters nodig, plus ruimte voor de context en macOS. Met 128 GB biedt de M5 Max ruim plaats aan modellen tot ongeveer 170 miljard parameters.

Model in 4-bitBenodigd geheugenPast op de M5 Max
8B-model4,5 GBJa
14B-model7,9 GBJa
32B-model18 GBJa
70B-model39,4 GBJa
gpt-oss-120b, mixture-of-experts65 GBJa
Qwen3.5-397B-A17B, mixture-of-experts223,3 GBNee
DeepSeek-V4.1-Flash, mixture-of-experts316 GBNee

3Hoe snel hij is

Tekst schrijven wordt begrensd door de geheugenbandbreedte: elke nieuwe token leest de actieve gewichten van het model één keer. Deel de 614 GB/s van de M5 Max door het aantal bytes dat per token wordt gelezen en je krijgt het plafond hieronder. In de praktijk haal je meestal zo'n 45% tot 80% daarvan (llama.cpp-benchmarks).

Model in 4-bitGelezen per tokenPlafond voor één chat
8B-model4,5 GB136 tokens/s
14B-model7,9 GB78 tokens/s
32B-model18 GB34 tokens/s
70B-model39,4 GB16 tokens/s
gpt-oss-120b, mixture-of-experts2,7 GB227 tokens/s

Chips van de M5-generatie hebben neural accelerators in de GPU en lezen prompts daardoor meerdere keren sneller dan M4: Apple mat dat de eerste token met MLX 3,3 tot 4,1 keer eerder verschijnt (Apple).

5Vergelijk met andere chips

6Vragen

Kan de M5 Max een 70B-model draaien?
Ja. Een 70B-model in 4-bit heeft ongeveer 40 GB nodig, en de M5 Max heeft tot 128 GB. Reken op een plafond van ongeveer 16 tokens per seconde voor één chat.
Hoeveel tokens per seconde haalt de M5 Max?
Voor een 8B-model in 4-bit ligt het plafond rond 136 tokens per seconde, en in de praktijk haal je ongeveer de helft tot vier vijfde daarvan. Grotere modellen zijn naar verhouding trager.
Is de M5 Max goed voor AI?
Voor lokale modellen tellen geheugen en bandbreedte het zwaarst. De M5 Max heeft tot 128 GB met 614 GB/s, genoeg voor modellen tot ongeveer 170 miljard parameters. Met MLX Node kan hij ook verdienen door AI-werk uit te voeren voor MLX Network.

Bronnen

  1. Apple: M5 Pro and M5 Maxapple.com
  2. Apple: Mac Studio with M5 Max and M5 Ultraapple.com
M5 Max voor lokale LLM's: geheugen, snelheid en wat past | MLX