Ανά μέγεθος μνήμης
| Μνήμη | Τρέχουν καλά | Το μεγαλύτερο που τρέχει καλά | gpt-oss-20b |
|---|---|---|---|
| 96 GB1.200 GB/s | 51 | gpt-oss-120b | 284–505 tok/s |
| 256 GB1.200 GB/s | 62 | MiMo V2.6 Flash | 284–505 tok/s |
| 512 GB1.200 GB/s | 70 | Ling 3.1 Flash | 284–505 tok/s |
Μοντέλα: Mac Studio (M5 Max or M5 Ultra). Δεν διατίθεται κάθε μέγεθος μνήμης με κάθε μοντέλο· τα Τεχνικά χαρακτηριστικά της Apple αναφέρουν τι προσφέρει το καθένα.
Οι καλύτερες εφαρμογές AI για ένα Mac σαν αυτό στο AI App Store: τιμή, άδεια και πού πηγαίνουν τα δεδομένα σας.
Ερωτήσεις
- Είναι ο Mac Studio με M5 Ultra καλός για τοπικά LLM;
- Με 512 GB τρέχει καλά 70 από 82 ανοιχτά μοντέλα, έως και το Ling 3.1 Flash, και γράφει περίπου 284–505 tokens ανά δευτερόλεπτο με το gpt-oss-20b. Το M5 Ultra διαβάζει τη μνήμη με 1.200 GB/s, κάτι που καθορίζει πόσο γρήγορα γράφει.
- Πόση μνήμη πρέπει να έχει ένας Mac Studio με M5 Ultra για AI;
- Με 96 GB τρέχει καλά 51 ανοιχτά μοντέλα· με 512 GB, 70, έως και το Ling 3.1 Flash. Η μνήμη καθορίζει ποια μοντέλα χωρούν και δεν αναβαθμίζεται αργότερα.
Άλλοι Mac
Ο Mac Studio με άλλα τσιπ:
- Mac Studio M5 Max
- Mac Studio M4 Max
- Mac Studio M3 Ultra
- Mac Studio M2 Max
- Mac Studio M2 Ultra
- Mac Studio M1 Max
- Mac Studio M1 Ultra
Κατά μέτωπο:
Απέναντι σε PC και κάρτες γραφικών:
Το M5 Ultra για τοπικό AI · Mac mini ή Mac Studio για AI · Ο καλύτερος Mac για τοπικά LLM · Πόση RAM χρειάζεται ένα LLM · Όλοι οι Mac
Πώς υπολογίζεται
Μνήμη: οι παράμετροι του μοντέλου σε 8, 6, 4, 3 ή 2 bit ανά βάρος συν τις κλίμακες ομάδων του MLX (μισό bit ανά βάρος), ή στην εγγενή του μορφή, με χώρο για τα συμφραζόμενα από πάνω. Από προεπιλογή το macOS αφήνει την GPU να χρησιμοποιεί περίπου το 75% της ενοποιημένης μνήμης. Ταχύτητα: το εύρος ζώνης μνήμης διαιρεμένο με τα bytes που διαβάζονται ανά token είναι το ανώτατο όριο για μία συνομιλία· στα δημόσια benchmarks Apple Silicon του llama.cpp οι πραγματικές εκτελέσεις φτάνουν περίπου το 45% έως 80% του ορίου, και αυτό το εύρος δείχνουμε. Είναι εκτιμήσεις, όχι μετρήσεις: μετρήστε τον δικό σας Mac στο MLX Bench. Στοιχεία μοντέλων από την επίσημη κάρτα κάθε μοντέλου, στοιχεία τσιπ από τα Τεχνικά χαρακτηριστικά της Apple. Ελέγχθηκε 2026-10-19. Ίδια δεδομένα με το mlx.app/compare.
Ανοιχτά δεδομένα: mlx.app/data (JSON, CSV)