Μπορεί ένας Mac να τρέξει το gpt-oss-20b;

Ναι, με 24 GB ενοποιημένης μνήμης ή περισσότερα. Το gpt-oss-20b έχει 21B παραμέτρους, από τις οποίες οι 3,6B είναι ενεργές σε κάθε token· εδώ θα δείτε τη μνήμη που χρειάζεται σε κάθε ακρίβεια και πόσο γρήγορα το τρέχει κάθε τσιπ της Apple.

Ενημέρωση

Μνήμη σε εγγενές 4,25-bit15,3 GBβάρη 13,8 GB + συμφραζόμενα
Μικρότερος Mac24 GBεγγενές 4,25-bit · 54 διαμορφώσεις Mac
Ταχύτερος Mac284–505tokens/s · M5 Ultra 96 GB (εκτίμηση)

Μνήμη σε κάθε ακρίβεια

ΈκδοσηΒάρηΜε συμφραζόμεναΜικρότερος Mac
εγγενές 4,25-bit13,8 GB15,3 GB24 GB
3-bit χαμηλότερη ποιότητα9,2 GB10,7 GB16 GB
2-bit χαμηλότερη ποιότητα6,6 GB8,1 GB16 GB

Πόση RAM χρειάζεται ένα LLM

Σε κάθε τσιπ της Apple

Το μικρότερο μέγεθος μνήμης κάθε τσιπ που τρέχει το gpt-oss-20b, η καλύτερη έκδοση που χωράει και η ταχύτητα γραφής που μπορείτε να περιμένετε.

ΤσιπΑπαιτείΈκδοσηTokens/s
M624 GBεγγενές 4,25-bit Τρέχει καλά40–72
M5 Ultra96 GBεγγενές 4,25-bit Τρέχει καλά284–505
M5 Max36 GBεγγενές 4,25-bit Τρέχει καλά109–194
M5 Pro24 GBεγγενές 4,25-bit Τρέχει καλά73–129
M524 GBεγγενές 4,25-bit Τρέχει καλά36–64
M4 Max36 GBεγγενές 4,25-bit Τρέχει καλά97–173
M4 Pro24 GBεγγενές 4,25-bit Τρέχει καλά65–115
M424 GBεγγενές 4,25-bit Τρέχει καλά28–51
M3 Ultra96 GBεγγενές 4,25-bit Τρέχει καλά194–345
M3 Max36 GBεγγενές 4,25-bit Τρέχει καλά71–126
M3 Pro36 GBεγγενές 4,25-bit Τρέχει καλά36–63
M324 GBεγγενές 4,25-bit Τρέχει καλά24–42
M2 Ultra64 GBεγγενές 4,25-bit Τρέχει καλά189–337
M2 Max32 GBεγγενές 4,25-bit Τρέχει καλά95–168
M2 Pro32 GBεγγενές 4,25-bit Τρέχει καλά47–84
M224 GBεγγενές 4,25-bit Τρέχει καλά24–42
M1 Ultra64 GBεγγενές 4,25-bit Τρέχει καλά189–337
M1 Max32 GBεγγενές 4,25-bit Τρέχει καλά95–168
M1 Pro32 GBεγγενές 4,25-bit Τρέχει καλά47–84
M116 GB3-bit Τρέχει καλά19–34

Πώς να το τρέξετε

Στο Terminal με το MLX της Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/gpt-oss-20b-MXFP4-Q8Build: mlx-community/gpt-oss-20b-MXFP4-Q8 στο Hugging Face. Οι άλλες ακρίβειες βρίσκονται ακριβώς δίπλα.

Βήμα προς βήμα: λήψη και εκτέλεση LLM σε Mac · MLX vs Ollama vs llama.cpp

Το gpt-oss-20b στο AI App Store · Προτιμάτε μια εφαρμογή από το Τερματικό; Συγκρίνετε τις εφαρμογές Mac που τρέχουν τοπικά μοντέλα στο AI App Store: τιμή, άδεια και πού πηγαίνουν τα δεδομένα σας.

Σχετικά με το gpt-oss-20b

ΔημιουργόςOpenAI
Παράμετροι21B συνολικά · 3,6B ενεργές (mixture of experts)
Συμφραζόμενα128K tokens
ΆδειαApache-2.0
Κυκλοφορία2025-08
ΕίσοδοςΚείμενο
Νοημοσύνη9 στον Artificial Analysis Intelligence Index
Βάρηopenai/gpt-oss-20b

Ερωτήσεις

Πόση μνήμη χρειάζεται το gpt-oss-20b;
Περίπου 13,8 GB για τα βάρη σε εγγενές 4,25-bit, συν χώρο για τα συμφραζόμενα: 15,3 GB συνολικά. Σε Mac αυτό σημαίνει 24 GB ενοποιημένης μνήμης ή περισσότερα, αφού το macOS αφήνει από προεπιλογή την GPU να χρησιμοποιεί περίπου το 75% της.
Πόσο γρήγορο είναι το gpt-oss-20b σε Mac;
Η ταχύτητα γραφής εξαρτάται από το εύρος ζώνης μνήμης. Ο ταχύτερος Mac γι’ αυτό εδώ είναι ένας Mac με M5 Ultra και 96 GB, με περίπου 284–505 tokens ανά δευτερόλεπτο (εγγενές 4,25-bit). Ο μικρότερος Mac που το τρέχει, με 24 GB, φτάνει περίπου τα 73–129 με M5 Pro.
Γιατί το gpt-oss-20b τρέχει πιο γρήγορα απ’ ό,τι δείχνει το μέγεθός του;
Είναι μοντέλο mixture of experts: κρατά 21B παραμέτρους στη μνήμη αλλά διαβάζει μόνο 3,6B για κάθε token, οπότε γράφει με την ταχύτητα ενός πολύ μικρότερου μοντέλου.

Παρόμοια μοντέλα

Όλα τα μοντέλα · Όλοι οι Mac · Συγκρίνετε τον Mac σας

Για την κάρτα μοντέλου ή το README σας

Runs on a Mac: gpt-oss-20b Δείχνει τον μικρότερο Mac που τρέχει καλά το gpt-oss-20b και οδηγεί εδώ.

[![Runs on a Mac](https://mlx.app/badge/run/gpt-oss-20b.svg)](https://mlx.app/run/gpt-oss-20b)

Πώς υπολογίζεται

Μνήμη: οι παράμετροι του μοντέλου σε 8, 6, 4, 3 ή 2 bit ανά βάρος συν τις κλίμακες ομάδων του MLX (μισό bit ανά βάρος), ή στην εγγενή του μορφή, με χώρο για τα συμφραζόμενα από πάνω. Από προεπιλογή το macOS αφήνει την GPU να χρησιμοποιεί περίπου το 75% της ενοποιημένης μνήμης. Ταχύτητα: το εύρος ζώνης μνήμης διαιρεμένο με τα bytes που διαβάζονται ανά token είναι το ανώτατο όριο για μία συνομιλία· στα δημόσια benchmarks Apple Silicon του llama.cpp οι πραγματικές εκτελέσεις φτάνουν περίπου το 45% έως 80% του ορίου, και αυτό το εύρος δείχνουμε. Είναι εκτιμήσεις, όχι μετρήσεις: μετρήστε τον δικό σας Mac στο MLX Bench. Στοιχεία μοντέλων από την επίσημη κάρτα κάθε μοντέλου, στοιχεία τσιπ από τα Τεχνικά χαρακτηριστικά της Apple. Ελέγχθηκε 2026-10-19. Ίδια δεδομένα με το mlx.app/compare.

Ανοιχτά δεδομένα: mlx.app/data (JSON, CSV)