Speicher bei jeder Genauigkeit
| Version | Gewichte | Mit Kontext | Kleinster Mac |
|---|---|---|---|
| 4,25 Bit nativ | 65,3 GB | 70,5 GB | 96 GB |
| 3 Bit geringere Qualität | 51,2 GB | 55,3 GB | 96 GB |
| 2 Bit geringere Qualität | 36,6 GB | 39,5 GB | 64 GB |
Auf jedem Apple-Chip
Die kleinste Speichergröße jedes Chips, mit der gpt-oss-120b läuft, die beste Version, die hineinpasst, und das Schreibtempo, das du erwarten kannst.
| Chip | Braucht | Version | Tokens/s |
|---|---|---|---|
| M6 | keine Größe passt | Zu groß | – |
| M5 Ultra | 96 GB | 4,25 Bit nativ Läuft gut | 200–356 |
| M5 Max | 128 GB | 4,25 Bit nativ Läuft gut | 102–182 |
| M5 Pro | 64 GB | 2 Bit Läuft gut | 86–154 |
| M5 | keine Größe passt | Zu groß | – |
| M4 Max | 128 GB | 4,25 Bit nativ Läuft gut | 91–162 |
| M4 Pro | 64 GB | 2 Bit Läuft gut | 77–137 |
| M4 | keine Größe passt | Zu groß | – |
| M3 Ultra | 96 GB | 4,25 Bit nativ Läuft gut | 137–243 |
| M3 Max | 96 GB | 4,25 Bit nativ Läuft gut | 50–89 |
| M3 Pro | keine Größe passt | Zu groß | – |
| M3 | keine Größe passt | Zu groß | – |
| M2 Ultra | 128 GB | 4,25 Bit nativ Läuft gut | 133–237 |
| M2 Max | 96 GB | 4,25 Bit nativ Läuft gut | 67–119 |
| M2 Pro | keine Größe passt | Zu groß | – |
| M2 | keine Größe passt | Zu groß | – |
| M1 Ultra | 128 GB | 4,25 Bit nativ Läuft gut | 133–237 |
| M1 Max | 64 GB | 2 Bit Läuft gut | 113–200 |
| M1 Pro | keine Größe passt | Zu groß | – |
| M1 | keine Größe passt | Zu groß | – |
So führst du es aus
- Der einfache Weg: Lade MLX Harness herunter, kostenlos und Open Source. Suche nach gpt-oss-120b, lade die Version, die zu deinem Mac passt, und chatte los. MLX Harness stellt das Modell auch deinen anderen Apps über eine OpenAI-kompatible API bereit.MLX Harness herunterladenKostenlos · Apple Silicon · macOS 14.5 oder neuer
- Im Terminal mit Apples MLX:
pip install mlx-lmmlx_lm.chat --model mlx-community/gpt-oss-120b-MXFP4-Q8Build: mlx-community/gpt-oss-120b-MXFP4-Q8 auf Hugging Face. Andere Genauigkeiten liegen gleich daneben.
Schritt für Schritt: LLMs auf den Mac laden und ausführen · So nutzt du MLX Harness · MLX vs. Ollama vs. llama.cpp
Über gpt-oss-120b
| Von | OpenAI |
|---|---|
| Parameter | 117B gesamt · 5,1B aktiv (Mixture of Experts) |
| Kontext | 128K Tokens |
| Lizenz | Apache-2.0 |
| Veröffentlicht | 2025-08 |
| Eingabe | Text |
| Intelligenz | 11,6 im Artificial Analysis Intelligence Index |
| Gewichte | openai/gpt-oss-120b |
Ratgeber: Schritt für Schritt auf mlx.app
Fragen
- Wie viel Speicher braucht gpt-oss-120b?
- Etwa 65,3 GB für die Gewichte mit 4,25 Bit nativ, plus Platz für den Kontext: insgesamt 70,5 GB. Auf einem Mac heißt das 96 GB gemeinsamer Arbeitsspeicher oder mehr, denn macOS lässt die GPU standardmäßig etwa 75 % davon nutzen.
- Wie schnell ist gpt-oss-120b auf einem Mac?
- Das Schreibtempo hängt von der Speicherbandbreite ab. Der schnellste Mac dafür ist hier einer mit M5 Ultra und 96 GB, mit etwa 200–356 Tokens pro Sekunde (4,25 Bit nativ). Der kleinste Mac, der es ausführt, schafft mit 96 GB etwa 200–356 auf dem M5 Ultra.
- Warum läuft gpt-oss-120b schneller, als seine Größe vermuten lässt?
- Es ist ein Mixture-of-Experts-Modell: Es hält 117B Parameter im Speicher, liest pro Token aber nur 5,1B. Darum schreibt es so schnell wie ein viel kleineres Modell.
Ähnliche Modelle
Für deine Model Card oder README
Zeigt den kleinsten Mac, der gpt-oss-120b gut ausführt, und verlinkt hierher.
[](https://mlx.app/run/gpt-oss-120b)So wird gerechnet
Speicher: die Parameter des Modells mit 8, 6, 4, 3 oder 2 Bit pro Gewicht plus die Gruppenskalen von MLX (ein halbes Bit pro Gewicht) oder in seinem nativen Format, dazu Platz für den Kontext. Standardmäßig lässt macOS die GPU etwa 75 % des gemeinsamen Arbeitsspeichers nutzen. Tempo: Speicherbandbreite geteilt durch die pro Token gelesenen Bytes ergibt die Obergrenze für eine Unterhaltung; in den öffentlichen Apple Silicon Benchmarks von llama.cpp erreichen echte Läufe etwa 45 % bis 80 % davon, und diese Spanne zeigen wir. Das sind Schätzungen, keine Messungen: Miss deinen eigenen Mac mit MLX Bench. Modellwerte aus der jeweiligen offiziellen Model Card, Chipwerte aus Apples technischen Daten. Geprüft am 2026-10-19. Dieselben Daten wie auf mlx.app/compare.