Läuft Llama 4 Maverick 17B-128E Instruct auf einem Mac?

Ja, mit 512 GB gemeinsamem Arbeitsspeicher oder mehr. Llama 4 Maverick 17B-128E Instruct hat 400B Parameter, davon 17B aktiv pro Token; hier siehst du, wie viel Speicher es bei jeder Genauigkeit braucht und wie schnell jeder Apple-Chip es ausführt.

Speicher mit 4 Bit243 GBGewichte 225 GB + Kontext
Kleinster Mac512 GB6 Bit · 5 Mac-Konfigurationen
Schnellster Mac39–70Tokens/s · M5 Ultra 512 GB (Schätzung)

Speicher bei jeder Genauigkeit

VersionGewichteMit KontextKleinster Mac
8 Bit425 GB459 GBmehr als jeder Mac
6 Bit325 GB351 GB512 GB
4 Bit225 GB243 GB512 GB
3 Bit geringere Qualität175 GB189 GB256 GB
2 Bit geringere Qualität125 GB135 GB192 GB

Auf jedem Apple-Chip

Die kleinste Speichergröße jedes Chips, mit der Llama 4 Maverick 17B-128E Instruct läuft, die beste Version, die hineinpasst, und das Schreibtempo, das du erwarten kannst.

ChipBrauchtVersionTokens/s
M6keine Größe passtZu groß–
M5 Ultra512 GB6 Bit Läuft gut39–70
M5 Maxkeine Größe passtZu groß–
M5 Prokeine Größe passtZu groß–
M5keine Größe passtZu groß–
M4 Maxkeine Größe passtZu groß–
M4 Prokeine Größe passtZu groß–
M4keine Größe passtZu groß–
M3 Ultra512 GB6 Bit Läuft gut27–47
M3 Maxkeine Größe passtZu groß–
M3 Prokeine Größe passtZu groß–
M3keine Größe passtZu groß–
M2 Ultra192 GB2 Bit Läuft gut68–121
M2 Maxkeine Größe passtZu groß–
M2 Prokeine Größe passtZu groß–
M2keine Größe passtZu groß–
M1 Ultrakeine Größe passtZu groß–
M1 Maxkeine Größe passtZu groß–
M1 Prokeine Größe passtZu groß–
M1keine Größe passtZu groß–

So führst du es aus

  1. Der einfache Weg: Lade MLX Harness herunter, kostenlos und Open Source. Suche nach Llama 4 Maverick 17B-128E Instruct, lade die Version, die zu deinem Mac passt, und chatte los. MLX Harness stellt das Modell auch deinen anderen Apps über eine OpenAI-kompatible API bereit.MLX Harness herunterladenKostenlos · Apple Silicon · macOS 14.5 oder neuer
  2. Im Terminal mit Apples MLX:pip install mlx-lmmlx_lm.chat --model mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bitBuild: mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bit auf Hugging Face. Andere Genauigkeiten liegen gleich daneben.

Schritt für Schritt: LLMs auf den Mac laden und ausführen · So nutzt du MLX Harness · MLX vs. Ollama vs. llama.cpp

Über Llama 4 Maverick 17B-128E Instruct

VonMeta
Parameter400B gesamt · 17B aktiv (Mixture of Experts)
Kontext1M Tokens
LizenzLlama 4 Community License
Veröffentlicht2025-04
EingabeText und Bilder
Intelligenz9,3 im Artificial Analysis Intelligence Index
Gewichtemeta-llama/Llama-4-Maverick-17B-128E-Instruct

Fragen

Wie viel Speicher braucht Llama 4 Maverick 17B-128E Instruct?
Etwa 225 GB für die Gewichte mit 4 Bit, plus Platz für den Kontext: insgesamt 243 GB. Auf einem Mac heißt das 512 GB gemeinsamer Arbeitsspeicher oder mehr, denn macOS lässt die GPU standardmäßig etwa 75 % davon nutzen.
Wie schnell ist Llama 4 Maverick 17B-128E Instruct auf einem Mac?
Das Schreibtempo hängt von der Speicherbandbreite ab. Der schnellste Mac dafür ist hier einer mit M5 Ultra und 512 GB, mit etwa 39–70 Tokens pro Sekunde (6 Bit). Der kleinste Mac, der es ausführt, schafft mit 512 GB etwa 39–70 auf dem M5 Ultra.
Warum läuft Llama 4 Maverick 17B-128E Instruct schneller, als seine Größe vermuten lässt?
Es ist ein Mixture-of-Experts-Modell: Es hält 400B Parameter im Speicher, liest pro Token aber nur 17B. Darum schreibt es so schnell wie ein viel kleineres Modell.

Ähnliche Modelle

Alle Modelle · Alle Macs · Deinen Mac vergleichen

Für deine Model Card oder README

Runs on a Mac: Llama 4 Maverick 17B-128E Instruct Zeigt den kleinsten Mac, der Llama 4 Maverick 17B-128E Instruct gut ausführt, und verlinkt hierher.

[![Runs on a Mac](https://mlx.app/badge/run/llama-4-maverick.svg)](https://mlx.app/run/llama-4-maverick)

So wird gerechnet

Speicher: die Parameter des Modells mit 8, 6, 4, 3 oder 2 Bit pro Gewicht plus die Gruppenskalen von MLX (ein halbes Bit pro Gewicht) oder in seinem nativen Format, dazu Platz für den Kontext. Standardmäßig lässt macOS die GPU etwa 75 % des gemeinsamen Arbeitsspeichers nutzen. Tempo: Speicherbandbreite geteilt durch die pro Token gelesenen Bytes ergibt die Obergrenze für eine Unterhaltung; in den öffentlichen Apple Silicon Benchmarks von llama.cpp erreichen echte Läufe etwa 45 % bis 80 % davon, und diese Spanne zeigen wir. Das sind Schätzungen, keine Messungen: Miss deinen eigenen Mac mit MLX Bench. Modellwerte aus der jeweiligen offiziellen Model Card, Chipwerte aus Apples technischen Daten. Geprüft am 2026-10-19. Dieselben Daten wie auf mlx.app/compare.

Läuft Llama 4 Maverick 17B-128E Instruct auf dem Mac? Speicher und Tempo