Μπορεί ένας Mac να τρέξει το Nemotron 3.5 Super VL 120B A12B;

Ναι, με 128 GB ενοποιημένης μνήμης ή περισσότερα. Το Nemotron 3.5 Super VL 120B A12B έχει 120B παραμέτρους, από τις οποίες οι 12B είναι ενεργές σε κάθε token· εδώ θα δείτε τη μνήμη που χρειάζεται σε κάθε ακρίβεια και πόσο γρήγορα το τρέχει κάθε τσιπ της Apple.

Ενημέρωση

Μνήμη σε 4-bit72,9 GBβάρη 67,5 GB + συμφραζόμενα
Μικρότερος Mac128 GB4-bit · 23 διαμορφώσεις Mac
Ταχύτερος Mac53–94tokens/s · M2 Ultra 128 GB (εκτίμηση)

Μνήμη σε κάθε ακρίβεια

ΈκδοσηΒάρηΜε συμφραζόμεναΜικρότερος Mac
8-bit128 GB138 GB192 GB
6-bit97,5 GB105 GB192 GB
4-bit67,5 GB72,9 GB128 GB
3-bit χαμηλότερη ποιότητα52,5 GB56,7 GB96 GB
2-bit χαμηλότερη ποιότητα37,5 GB40,5 GB64 GB

Πόση RAM χρειάζεται ένα LLM

Σε κάθε τσιπ της Apple

Το μικρότερο μέγεθος μνήμης κάθε τσιπ που τρέχει το Nemotron 3.5 Super VL 120B A12B, η καλύτερη έκδοση που χωράει και η ταχύτητα γραφής που μπορείτε να περιμένετε.

ΤσιπΑπαιτείΈκδοσηTokens/s
M6κανένα μέγεθος δεν χωράειΠολύ μεγάλο–
M5 Ultra256 GB8-bit Τρέχει καλά42–75
M5 Max128 GB4-bit Τρέχει καλά41–72
M5 Pro64 GB2-bit Τρέχει καλά36–65
M5κανένα μέγεθος δεν χωράειΠολύ μεγάλο–
M4 Max128 GB4-bit Τρέχει καλά36–64
M4 Pro64 GB2-bit Τρέχει καλά32–57
M4κανένα μέγεθος δεν χωράειΠολύ μεγάλο–
M3 Ultra256 GB8-bit Τρέχει καλά29–51
M3 Max128 GB4-bit Τρέχει καλά26–47
M3 Proκανένα μέγεθος δεν χωράειΠολύ μεγάλο–
M3κανένα μέγεθος δεν χωράειΠολύ μεγάλο–
M2 Ultra128 GB4-bit Τρέχει καλά53–94
M2 Max64 GB2-bit Τρέχει καλά47–84
M2 Proκανένα μέγεθος δεν χωράειΠολύ μεγάλο–
M2κανένα μέγεθος δεν χωράειΠολύ μεγάλο–
M1 Ultra128 GB4-bit Τρέχει καλά53–94
M1 Max64 GB2-bit Τρέχει καλά47–84
M1 Proκανένα μέγεθος δεν χωράειΠολύ μεγάλο–
M1κανένα μέγεθος δεν χωράειΠολύ μεγάλο–

Πώς να το τρέξετε

Στο Terminal με το MLX της Apple: Το κανονικό mlx-lm δεν μπορεί ακόμη να φορτώσει αυτό το μοντέλο (Duckets/NVIDIA-Nemotron-3.5-Super-VL-120B-A12B-MLX-4bit), οπότε ακολουθήστε τις οδηγίες στην κάρτα μοντέλου του build.Build: Duckets/NVIDIA-Nemotron-3.5-Super-VL-120B-A12B-MLX-4bit στο Hugging Face. Οι άλλες ακρίβειες βρίσκονται ακριβώς δίπλα.

Βήμα προς βήμα: λήψη και εκτέλεση LLM σε Mac · MLX vs Ollama vs llama.cpp

Προτιμάτε μια εφαρμογή από το Τερματικό; Συγκρίνετε τις εφαρμογές Mac που τρέχουν τοπικά μοντέλα στο AI App Store: τιμή, άδεια και πού πηγαίνουν τα δεδομένα σας.

Σχετικά με το Nemotron 3.5 Super VL 120B A12B

ΔημιουργόςNVIDIA
Παράμετροι120B συνολικά · 12B ενεργές (mixture of experts)
Συμφραζόμενα1M tokens
ΆδειαOpenMDW-1.1
Κυκλοφορία2026-10
ΕίσοδοςΚείμενο και εικόνες
Νοημοσύνη26,5 στον Artificial Analysis Intelligence Index
Βάρηnvidia/NVIDIA-Nemotron-3.5-Super-VL-120B-A12B-BF16

Ερωτήσεις

Πόση μνήμη χρειάζεται το Nemotron 3.5 Super VL 120B A12B;
Περίπου 67,5 GB για τα βάρη σε 4-bit, συν χώρο για τα συμφραζόμενα: 72,9 GB συνολικά. Σε Mac αυτό σημαίνει 128 GB ενοποιημένης μνήμης ή περισσότερα, αφού το macOS αφήνει από προεπιλογή την GPU να χρησιμοποιεί περίπου το 75% της.
Πόσο γρήγορο είναι το Nemotron 3.5 Super VL 120B A12B σε Mac;
Η ταχύτητα γραφής εξαρτάται από το εύρος ζώνης μνήμης. Ο ταχύτερος Mac γι’ αυτό εδώ είναι ένας Mac με M2 Ultra και 128 GB, με περίπου 53–94 tokens ανά δευτερόλεπτο (4-bit). Ο μικρότερος Mac που το τρέχει, με 128 GB, φτάνει περίπου τα 53–94 με M2 Ultra.
Γιατί το Nemotron 3.5 Super VL 120B A12B τρέχει πιο γρήγορα απ’ ό,τι δείχνει το μέγεθός του;
Είναι μοντέλο mixture of experts: κρατά 120B παραμέτρους στη μνήμη αλλά διαβάζει μόνο 12B για κάθε token, οπότε γράφει με την ταχύτητα ενός πολύ μικρότερου μοντέλου.

Παρόμοια μοντέλα

Όλα τα μοντέλα · Όλοι οι Mac · Συγκρίνετε τον Mac σας

Για την κάρτα μοντέλου ή το README σας

Runs on a Mac: Nemotron 3.5 Super VL 120B A12B Δείχνει τον μικρότερο Mac που τρέχει καλά το Nemotron 3.5 Super VL 120B A12B και οδηγεί εδώ.

[![Runs on a Mac](https://mlx.app/badge/run/nemotron-3.5-super-vl-120b-a12b.svg)](https://mlx.app/run/nemotron-3.5-super-vl-120b-a12b)

Πώς υπολογίζεται

Μνήμη: οι παράμετροι του μοντέλου σε 8, 6, 4, 3 ή 2 bit ανά βάρος συν τις κλίμακες ομάδων του MLX (μισό bit ανά βάρος), ή στην εγγενή του μορφή, με χώρο για τα συμφραζόμενα από πάνω. Από προεπιλογή το macOS αφήνει την GPU να χρησιμοποιεί περίπου το 75% της ενοποιημένης μνήμης. Ταχύτητα: το εύρος ζώνης μνήμης διαιρεμένο με τα bytes που διαβάζονται ανά token είναι το ανώτατο όριο για μία συνομιλία· στα δημόσια benchmarks Apple Silicon του llama.cpp οι πραγματικές εκτελέσεις φτάνουν περίπου το 45% έως 80% του ορίου, και αυτό το εύρος δείχνουμε. Είναι εκτιμήσεις, όχι μετρήσεις: μετρήστε τον δικό σας Mac στο MLX Bench. Στοιχεία μοντέλων από την επίσημη κάρτα κάθε μοντέλου, στοιχεία τσιπ από τα Τεχνικά χαρακτηριστικά της Apple. Ελέγχθηκε 2026-10-19. Ίδια δεδομένα με το mlx.app/compare.

Ανοιχτά δεδομένα: mlx.app/data (JSON, CSV)