24 GB'lık Mac için en iyi LLM'ler.

73 açık modelden 28 tanesi 24 GB'ta iyi çalışır. GPU varsayılan olarak bunun yaklaşık 18 GB'ını kullanabilir. Hız çipe bağlıdır: M3 çipinde 100 GB/s'den M5 Pro çipinde 307 GB/s'ye kadar.

İyi çalışanların en akıllısıMiniCPM5 2B8 bit · 2,7 GB · 17–91 tok/sİyi çalışanların en büyüğüGemma 4 26B A4B4 bit · 14,2 GB · 21–117 tok/sKod içinDevstral Small 2 (24B)4 bit · 13,5 GB · 3–18 tok/s

24 GB'lık Mac'ler

M2–M6 arasında 7 çip 24 GB ile gelir. Kendi listesi ve hızları için birini açın.

İyi çalışanlar 36

Bağlam için yer kalarak sığar, M5 Pro çipinde saniyede 10 veya daha fazla token.

ModelSürümBellekM3M5 Pro
MiniCPM5 2B2,52B · Zekâ 12,58 bit2,7 GB17–3051–91
Qwen3.5 9B9B · Zekâ 11,28 bit9,6 GB5–814–26
Granite 4.2 8B8B · Zekâ 11,18 bit8,5 GB10–1816–29
Granite 4.2 3B3B · Zekâ 9,18 bit3,2 GB14–2543–77
gpt-oss-20b21B · 3,6B etkin · Zekâ 9yerel 4,25 bit13,8 GB24–4273–129
Gemma 4 E4B8B · Zekâ 8,98 bit8,5 GB12–2229–51
Ministral 3 8B8,9B · Zekâ 5,58 bit9,5 GB5–815–26
Nemotron 3 Nano 4B3,97B · Zekâ 4,88 bit4,2 GB11–1933–58
Gemma 4 26B A4B25,2B · 3,8B etkin4 bit14,2 GB21–3866–117
Devstral Small 2 (24B)24B4 bit13,5 GB3–610–18
Magistral Small 1.2 (2509)24B4 bit13,5 GB3–610–18
Mistral Small 3.2 (24B)24B4 bit13,5 GB3–610–18
LFM2.5 24B A2B24B · 2B etkin4 bit13,5 GB41–73126–223
Phi-4 Reasoning Vision 15B15B6 bit12,2 GB3–511–20
Phi-4 (14B)14B6 bit11,4 GB3–512–22
Gemma 4 12B Unified12B8 bit12,7 GB4–611–19
Qwen3 8B8,2B8 bit8,7 GB10–1716–28
Llama 3.1 8B Instruct8B8 bit8,5 GB10–1816–29
Gemma 4 E2B5,1B8 bit5,4 GB19–3358–102
Qwen3.5 4B4B8 bit4,3 GB10–1932–57
Phi-4 mini instruct3,8B8 bit4 GB11–2035–61
Llama 3.2 3B Instruct3,21B8 bit3,4 GB13–2441–72
SmolLM3 3B3B8 bit3,2 GB14–2543–77
LFM2.5 2.6B2,69B8 bit2,9 GB16–2848–85
Qwen3.5 2B2B8 bit2,1 GB21–3866–117
Llama 3.2 1B Instruct1,23B8 bit1,3 GB35–62106–189
Qwen3.5 0.8B0,8B8 bit0,9 GB50–89154–273
Qwen3 0.6B0,6B8 bit0,6 GB75–133230–409
Qwen3.6 35B A3B35B · 3B etkin · Zekâ 18,23 bit daha düşük kalite15,3 GB35–62106–189
Muse Glimmer 30B29,6B · Zekâ 17,53 bit daha düşük kalite13 GB3–611–19
Gemma 4 31B30,7B · Zekâ 14,73 bit daha düşük kalite13,4 GB3–610–18
Nemotron 3.5 Lightning 30B A3B30B · 3B etkin · Zekâ 12,93 bit daha düşük kalite13,1 GB35–62106–189
Granite 4.2 30B30B · Zekâ 12,73 bit daha düşük kalite13,1 GB3–611–19
Nemotron 3 Nano 30B A3B30B · 3,5B etkin · Zekâ 8,93 bit daha düşük kalite13,1 GB30–5392–164
Qwen3 Coder 30B A3B Instruct30,5B · 3,3B etkin3 bit daha düşük kalite13,3 GB32–5799–175
GLM-4.7 Flash30B · 3B etkin3 bit daha düşük kalite13,1 GB35–62106–189

Çalışır ama yavaş 2

Sığar ama saniyede 10 tokenın altında: toplu işler için uygun, sohbet için yavaş.

ModelSürümBellekM3M5 Pro
Qwen3.8 27B27B · Zekâ 33,74 bit15,2 GB3–59–16
Qwen3.6 27B27B4 bit15,2 GB3–59–16

Çok büyük olanlar 35

2 bitte bile 24 GB'tan fazla bellek gerekir.

Sorular

24 GB'lık Mac için en iyi LLM hangisi?
Yayımlanmış Intelligence Index puanı olan modeller arasında 24 GB'ta iyi çalışanların en yüksek puanlısı MiniCPM5 2B (8 bit). İyi çalışanların en büyüğü Gemma 4 26B A4B. Kod için: Devstral Small 2 (24B).
Mac'te yerel yapay zekâ için 24 GB yeterli mi?
Buradaki 73 açık modelden 28 tanesi bu bellekte 4 bit veya daha iyi hassasiyette iyi çalışır. macOS varsayılan olarak GPU'nun bunun yaklaşık 18 GB'ını kullanmasına izin verir; model ve bağlamı buna sığmalıdır.
24 GB'lık bir Mac gpt-oss-20b çalıştırabilir mi?
Evet, yerel 4,25 bit: M3 çipinde saniyede yaklaşık 24–42 token, M5 Pro çipinde 73–129.

Diğer boyutlar: 8 GB · 16 GB · 18 GB · 24 GB · 32 GB · 36 GB · 48 GB · 64 GB · 96 GB · 128 GB · 192 GB · 256 GB · 512 GB

Bunları MLX Harness ile (ücretsiz, açık kaynak) ya da Terminal'de Apple'ın mlx-lm aracıyla çalıştırın: adım adım.

Nasıl hesaplanır

Bellek: modelin parametreleri ağırlık başına 8, 6, 4, 3 veya 2 bitte, artı MLX'in grup ölçekleri (ağırlık başına yarım bit) ya da modelin yerel biçimi; üstüne bağlam için yer. macOS varsayılan olarak GPU'nun birleşik belleğin yaklaşık %75'ini kullanmasına izin verir. Hız: bellek bant genişliğinin token başına okunan bayt sayısına bölümü, tek bir sohbet için üst sınırdır; llama.cpp'nin herkese açık Apple Silicon karşılaştırmalarında gerçek çalıştırmalar bunun yaklaşık %45 ile %80'ine ulaşır ve gösterilen aralık budur. Bunlar ölçüm değil tahmindir: kendi Mac'inizi MLX Bench ile ölçün. Model verileri her modelin resmî model kartından, çip verileri Apple'ın Teknik Özellikler sayfalarından alınmıştır. Kontrol tarihi: 2026-10-19. mlx.app/compare ile aynı veriler.

24 GB'lık Mac için en iyi yerel LLM'ler (M2–M6): neler, ne hızda