Το M5 Pro για τοπικό AI.

Το M5 Pro έχει έως 64 GB ενοποιημένης μνήμης, που διαβάζεται με έως 307 GB/s. Δείτε τι σημαίνει αυτό για την εκτέλεση γλωσσικών μοντέλων σε έναν Mac με αυτό το τσιπ, υπολογισμένο από τα στοιχεία της ίδιας της Apple.

Ενημέρωση

1Οι προδιαγραφές που μετρούν για το AI

Ενοποιημένη μνήμη64 GB
Εύρος ζώνης μνήμης307 GB/s
Υπάρχει στουςMacBook Pro 14 και 16 ιντσών (2026), Mac mini (2026)
Αποκλειστική θέση για αυτόΘέση Pro Latest: εξορύσσει έως 120 MLX την ημέρα

2Ποια μοντέλα χωρούν

Στα 4 bit ανά βάρος ένα μοντέλο χρειάζεται λίγο πάνω από μισό gigabyte ανά δισεκατομμύριο παραμέτρους, συν χώρο για τα συμφραζόμενά του και το macOS. Με 64 GB, το M5 Pro χωράει άνετα μοντέλα έως περίπου 85 δισεκατομμύρια παραμέτρους.

Μοντέλο σε 4 bitΜνήμη που χρειάζεταιΧωράει στο M5 Pro
Μοντέλο 8B4,5 GBΝαι
Μοντέλο 14B7,9 GBΝαι
Μοντέλο 32B18 GBΝαι
Μοντέλο 70B39,4 GBΝαι
gpt-oss-120b, mixture-of-experts65 GBΌχι
Qwen3.5-397B-A17B, mixture-of-experts223,3 GBΌχι
DeepSeek-V4.1-Flash, mixture-of-experts316 GBΌχι

3Πόσο γρήγορα τρέχει

Τη γραφή κειμένου την περιορίζει το εύρος ζώνης μνήμης: κάθε νέο token διαβάζει μία φορά τα ενεργά βάρη του μοντέλου. Αν διαιρέσετε τα 307 GB/s του M5 Pro με τα bytes που διαβάζονται ανά token, προκύπτει το παρακάτω όριο. Οι πραγματικές εκτελέσεις φτάνουν συνήθως περίπου το 45% έως 80% αυτού (benchmarks του llama.cpp).

Μοντέλο σε 4 bitΑνάγνωση ανά tokenΌριο για μία συνομιλία
Μοντέλο 8B4,5 GB68 tokens/s
Μοντέλο 14B7,9 GB39 tokens/s
Μοντέλο 32B18 GB17 tokens/s
Μοντέλο 70B39,4 GB8 tokens/s

Τα τσιπ της γενιάς M5 προσθέτουν νευρωνικούς επιταχυντές στη GPU, οπότε διαβάζουν τα prompts αρκετές φορές πιο γρήγορα από το M4: η Apple μέτρησε ότι το πρώτο token φτάνει 3,3 έως 4,1 φορές νωρίτερα με το MLX (Apple).

5Σύγκριση με άλλα τσιπ

6Ερωτήσεις

Μπορεί το M5 Pro να τρέξει μοντέλο 70B;
Ναι. Ένα μοντέλο 70B σε 4 bit χρειάζεται περίπου 40 GB, και το M5 Pro έχει έως 64 GB. Υπολογίστε ένα όριο περίπου 8 tokens ανά δευτερόλεπτο για μία συνομιλία.
Πόσα tokens ανά δευτερόλεπτο βγάζει το M5 Pro;
Για ένα μοντέλο 8B σε 4 bit, το όριο είναι περίπου 68 tokens ανά δευτερόλεπτο, και οι πραγματικές εκτελέσεις φτάνουν περίπου το μισό έως τα τέσσερα πέμπτα του. Τα μεγαλύτερα μοντέλα είναι αναλογικά πιο αργά.
Είναι καλό το M5 Pro για AI;
Για την τοπική εκτέλεση μοντέλων, η μνήμη και το εύρος ζώνης μετρούν περισσότερο. Το M5 Pro έχει έως 64 GB στα 307 GB/s, αρκετά για μοντέλα έως περίπου 85 δισεκατομμύρια παραμέτρους. Μπορεί επίσης να κερδίζει εκτελώντας εργασίες AI για το MLX Network με το MLX Node.

Πηγές

  1. Apple: M5 Pro and M5 Maxapple.com
  2. Apple: Mac mini (2026) specssupport.apple.com