Τρέχει καλά 24
Χωράει με χώρο για τα συμφραζόμενα, με 10 ή περισσότερα tokens ανά δευτερόλεπτο.
| Μοντέλο | Έκδοση | Μνήμη | Tokens/s |
|---|---|---|---|
| MiniCPM5 2B2,52B · Νοημοσύνη 12,5 | 8-bit | 2,7 GB | 17–30 |
| Granite 4.2 8B8B · Νοημοσύνη 11,1 | 4-bit | 4,5 GB | 10–18 |
| Granite 4.2 3B3B · Νοημοσύνη 9,1 | 8-bit | 3,2 GB | 14–25 |
| Gemma 4 E4B8B · Νοημοσύνη 8,9 | 4-bit | 4,5 GB | 18–32 |
| Nemotron 3 Nano 4B3,97B · Νοημοσύνη 4,8 | 8-bit | 4,2 GB | 11–19 |
| Llama 3.1 8B Instruct8B | 4-bit | 4,5 GB | 10–18 |
| Gemma 4 E2B5,1B | 6-bit | 4,1 GB | 24–42 |
| Nanbeige4.2 3B4,17B | 4-bit | 2,3 GB | 11–20 |
| Spark-X2.6 4B4,11B | 8-bit | 4,4 GB | 10–18 |
| Qwen3.5 4B4B | 8-bit | 4,3 GB | 10–19 |
| Nemotron-Labs Dory 1.0 4B3,98B | 6-bit | 3,2 GB | 10–17 |
| Phi-4 mini instruct3,8B | 8-bit | 4 GB | 11–20 |
| Llama 3.2 3B Instruct3,21B | 8-bit | 3,4 GB | 13–24 |
| SmolLM3 3B3B | 8-bit | 3,2 GB | 14–25 |
| LFM2.5 2.6B2,69B | 8-bit | 2,9 GB | 16–28 |
| Qwen3.5 2B2B | 8-bit | 2,1 GB | 21–38 |
| Llama 3.2 1B Instruct1,23B | 8-bit | 1,3 GB | 35–62 |
| Qwen3.5 0.8B0,8B | 8-bit | 0,9 GB | 50–89 |
| Qwen3 0.6B0,6B | 8-bit | 0,6 GB | 75–133 |
| Qwen3.5 9B9B · Νοημοσύνη 11,2 | 3-bit χαμηλότερη ποιότητα | 3,9 GB | 12–21 |
| Ministral 3 8B8,9B · Νοημοσύνη 5,5 | 3-bit χαμηλότερη ποιότητα | 3,9 GB | 12–21 |
| Phi-4 (14B)14B | 2-bit χαμηλότερη ποιότητα | 4,4 GB | 10–18 |
| Gemma 4 12B Unified12B | 2-bit χαμηλότερη ποιότητα | 3,7 GB | 12–22 |
| Qwen3 8B8,2B | 3-bit χαμηλότερη ποιότητα | 3,6 GB | 13–22 |
Χωράει οριακά 1
Χρειάζεται σχεδόν όλη τη μνήμη: αυξήστε το όριο μνήμης της GPU και κρατήστε τα συμφραζόμενα σύντομα.
| Μοντέλο | Έκδοση | Μνήμη | Tokens/s |
|---|---|---|---|
| Phi-4 Reasoning Vision 15B15B | 2-bit χαμηλότερη ποιότητα | 4,7 GB | 10–17 |
Πολύ μεγάλο 57
Χρειάζεται περισσότερα από 8 GB μνήμης, ακόμη και στα 2 bit.
- MiMo V2.6 Pro1.020B
- Kimi K32.800B
- MiMo V2.6 Flash309B
- Kimi K2.7 Code1.000B
- gpt-oss-120b117B
- gpt-oss-20b21B
- Kimi K2.61.000B
- DeepSeek V4.1 Flash 1017552B
- GLM-5.3744B
- GLM-5.3 Flash320B
- Ling 3.1 Flash560B
- Qwen3.8 2.4T A95B2.400B
- Qwen3.8 Flash Next180B
- Muse Spark Open816B
- DeepSeek V4 Pro 08131.600B
- Qwen3.8 27B27B
- Beam 1.0501B
- MiniMax M3428B
- Nemotron 3.5 Super VL 120B A12B120B
- Inkling Small276B
- Hy3295B
- Inkling975B
- Nemotron 3 Ultra 550B A55B550B
- Nemotron 3.5 Bolt 74B A9B74B
- Qwen3.5 397B A17B397B
- Qwen3.6 35B A3B35B
- Muse Glimmer 30B29,6B
- Qwen3.5 122B A10B122B
- Gemma 4 31B30,7B
- Mistral Medium 3.5 (128B)128B
- Nemotron 3.5 Lightning 30B A3B30B
- Granite 4.2 30B30B
- Mistral Small 4 (119B)119B
- Llama 4 Maverick 17B-128E Instruct400B
- Qwen3 Coder Next80B
- Nemotron 3 Nano 30B A3B30B
- Llama 4 Scout 17B-16E Instruct109B
- Mistral Large 3 (675B)675B
- DeepSeek V4 Flash 0731284B
- MiniMax M2.7230B
- Devstral 2 (123B)123B
- Ornith 1.5 122B122B
- Nemotron 3 Super 120B A12B120B
- GLM-4.5 Air106B
- Llama 3.3 70B Instruct70B
- Recursive Flint39,8B
- Sage-A1.535B
- Qwen3 Coder 30B A3B Instruct30,5B
- Hy-Memory-30B-A3B30,1B
- GLM-4.7 Flash30B
- Raon-1 mini Preview28,8B
- Qwen3.6 27B27B
- Gemma 4 26B A4B25,2B
- Devstral Small 2 (24B)24B
- Magistral Small 1.2 (2509)24B
- Mistral Small 3.2 (24B)24B
- LFM2.5 24B A2B24B
Οι καλύτερες εφαρμογές AI για ένα Mac σαν αυτό στο AI App Store: τιμή, άδεια και πού πηγαίνουν τα δεδομένα σας.
Άλλοι Mac
Όλοι οι Mac με 8 GB, με οποιοδήποτε τσιπ.
Το M3 με περισσότερη ή λιγότερη μνήμη:
Γειτονικά τσιπ:
Κατά μέτωπο:
Συγκρίνετέ το με οποιονδήποτε Mac ή GPU · Το M3 για τοπικό AI · Ο καλύτερος Mac για τοπικά LLM · Πόση RAM χρειάζεται ένα LLM · Όλοι οι Mac
Ερωτήσεις
- Ποιο είναι το καλύτερο LLM για Mac με M3 και 8 GB;
- Από τα μοντέλα με δημοσιευμένο Intelligence Index, το MiniCPM5 2B έχει την υψηλότερη βαθμολογία ανάμεσα σε όσα τρέχουν καλά εδώ: 8-bit, περίπου 17–30 tokens ανά δευτερόλεπτο. Το μεγαλύτερο που τρέχει καλά είναι το Granite 4.2 8B.
- Μπορεί ένας Mac με M3 και 8 GB να τρέξει το Llama 3.3 70B;
- Όχι: ακόμη και στα 2 bit χρειάζεται περισσότερα από τα 6 GB που μπορεί να χρησιμοποιήσει η GPU από προεπιλογή.
- Πόσο γρήγορο είναι το gpt-oss-20b σε M3;
- Δεν χωράει σε 8 GB.
Εκτελέστε τα με το mlx-lm της Apple στο Terminal: βήμα προς βήμα.
Πώς υπολογίζεται
Μνήμη: οι παράμετροι του μοντέλου σε 8, 6, 4, 3 ή 2 bit ανά βάρος συν τις κλίμακες ομάδων του MLX (μισό bit ανά βάρος), ή στην εγγενή του μορφή, με χώρο για τα συμφραζόμενα από πάνω. Από προεπιλογή το macOS αφήνει την GPU να χρησιμοποιεί περίπου το 75% της ενοποιημένης μνήμης. Ταχύτητα: το εύρος ζώνης μνήμης διαιρεμένο με τα bytes που διαβάζονται ανά token είναι το ανώτατο όριο για μία συνομιλία· στα δημόσια benchmarks Apple Silicon του llama.cpp οι πραγματικές εκτελέσεις φτάνουν περίπου το 45% έως 80% του ορίου, και αυτό το εύρος δείχνουμε. Είναι εκτιμήσεις, όχι μετρήσεις: μετρήστε τον δικό σας Mac στο MLX Bench. Στοιχεία μοντέλων από την επίσημη κάρτα κάθε μοντέλου, στοιχεία τσιπ από τα Τεχνικά χαρακτηριστικά της Apple. Ελέγχθηκε 2026-10-19. Ίδια δεδομένα με το mlx.app/compare.
Ανοιχτά δεδομένα: mlx.app/data (JSON, CSV)