Un Mac può eseguire Nemotron 3 Super 120B A12B?

Sì, con 128 GB di memoria unificata o più. Nemotron 3 Super 120B A12B ha 120B parametri, di cui 12B attivi per ogni token; ecco la memoria che richiede a ogni precisione e quanto velocemente lo esegue ogni chip Apple.

Memoria a 4 bit72,9 GBpesi 67,5 GB + contesto
Mac più piccolo128 GB4 bit · 23 configurazioni di Mac
Mac più veloce53–94token/s · M2 Ultra 128 GB (stima)

Memoria a ogni precisione

VersionePesiCon contestoMac più piccolo
8 bit128 GB138 GB192 GB
6 bit97,5 GB105 GB192 GB
4 bit67,5 GB72,9 GB128 GB
3 bit qualità inferiore52,5 GB56,7 GB96 GB
2 bit qualità inferiore37,5 GB40,5 GB64 GB

Su ogni chip Apple

Per ogni chip, il taglio di memoria più piccolo che esegue Nemotron 3 Super 120B A12B, la versione migliore che ci sta e la velocità di scrittura che puoi aspettarti.

ChipRichiedeVersioneToken/s
M6nessun taglio bastaTroppo grande–
M5 Ultra256 GB8 bit Gira bene42–75
M5 Max128 GB4 bit Gira bene41–72
M5 Pro64 GB2 bit Gira bene36–65
M5nessun taglio bastaTroppo grande–
M4 Max128 GB4 bit Gira bene36–64
M4 Pro64 GB2 bit Gira bene32–57
M4nessun taglio bastaTroppo grande–
M3 Ultra256 GB8 bit Gira bene29–51
M3 Max128 GB4 bit Gira bene26–47
M3 Pronessun taglio bastaTroppo grande–
M3nessun taglio bastaTroppo grande–
M2 Ultra128 GB4 bit Gira bene53–94
M2 Max64 GB2 bit Gira bene47–84
M2 Pronessun taglio bastaTroppo grande–
M2nessun taglio bastaTroppo grande–
M1 Ultra128 GB4 bit Gira bene53–94
M1 Max64 GB2 bit Gira bene47–84
M1 Pronessun taglio bastaTroppo grande–
M1nessun taglio bastaTroppo grande–

Come eseguirlo

  1. Il modo più semplice: scarica MLX Harness, gratuito e open source. Cerca Nemotron 3 Super 120B A12B, scarica la versione adatta al tuo Mac e inizia a chattare. MLX Harness rende disponibile il modello anche alle tue altre app tramite un’API compatibile con OpenAI.Scarica MLX HarnessGratuito · Apple Silicon · macOS 14.5 o successivo
  2. Nel Terminale, con MLX di Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/NVIDIA-Nemotron-3-Super-120B-A12B-4bitBuild: mlx-community/NVIDIA-Nemotron-3-Super-120B-A12B-4bit su Hugging Face. Le altre precisioni sono lì accanto.

Passo dopo passo: scaricare ed eseguire LLM su Mac · come usare MLX Harness · MLX vs Ollama vs llama.cpp

Informazioni su Nemotron 3 Super 120B A12B

Creato daNVIDIA
Parametri120B in totale · 12B attivi (mixture-of-experts)
Contesto256K token
LicenzaNVIDIA Nemotron Open Model License
Uscita2026-03
InputTesto
Pesinvidia/NVIDIA-Nemotron-3-Super-120B-A12B-BF16

Domande

Quanta memoria richiede Nemotron 3 Super 120B A12B?
Circa 67,5 GB di pesi a 4 bit, più lo spazio per il contesto: 72,9 GB in tutto. Su un Mac significa 128 GB di memoria unificata o più, perché di default macOS lascia usare alla GPU circa il 75% della memoria.
Quanto è veloce Nemotron 3 Super 120B A12B su un Mac?
La velocità di scrittura dipende dalla larghezza di banda della memoria. Qui il Mac più veloce per questo modello è un M2 Ultra con 128 GB, a circa 53–94 token al secondo (4 bit). Il Mac più piccolo che lo esegue, con 128 GB, arriva a circa 53–94 su un M2 Ultra.
Perché Nemotron 3 Super 120B A12B è più veloce di quanto suggeriscano le sue dimensioni?
È un modello mixture-of-experts: tiene in memoria 120B parametri ma per ogni token ne legge solo 12B, quindi scrive alla velocità di un modello molto più piccolo.

Modelli simili

Tutti i modelli · Tutti i Mac · Confronta il tuo Mac

Per la scheda del tuo modello o il README

Runs on a Mac: Nemotron 3 Super 120B A12B Mostra il Mac più piccolo che esegue bene Nemotron 3 Super 120B A12B e rimanda a questa pagina.

[![Runs on a Mac](https://mlx.app/badge/run/nemotron-3-super-120b-a12b.svg)](https://mlx.app/run/nemotron-3-super-120b-a12b)

Come è calcolato

Memoria: i parametri del modello a 8, 6, 4, 3 o 2 bit per peso più le scale per gruppo di MLX (mezzo bit per peso), oppure il suo formato nativo, con in più lo spazio per il contesto. Di default macOS lascia usare alla GPU circa il 75% della memoria unificata. Velocità: la larghezza di banda della memoria divisa per i byte letti per ogni token è il limite massimo per una conversazione; nei benchmark pubblici su Apple Silicon di llama.cpp, le esecuzioni reali arrivano a circa il 45%–80% di quel limite, ed è l’intervallo mostrato. Sono stime, non misurazioni: misura il tuo Mac su MLX Bench. Dati dei modelli dalla rispettiva scheda ufficiale, dati dei chip dalle specifiche tecniche di Apple. Verificato il 2026-10-19. Stessi dati di mlx.app/compare.

Un Mac può eseguire Nemotron 3 Super 120B A12B? Memoria, velocità