Giriş yapCüzdan oluştur

32 GB'lık M6 neleri çalıştırır?

73 açık modelden 29 tanesi bu Mac'te iyi çalışır. GPU varsayılan olarak 32 GB'ın yaklaşık 24 GB'ını kullanabilir ve bellek 170 GB/s hızla okunur; yazma hızını bu belirler. Bulunduğu modeller: Mac mini (M6 or M5 Pro).

İyi çalışanların en akıllısıQwen3.6 35B A3B4 bit · 19,7 GB · 45–80 tok/sİyi çalışanların en büyüğüQwen3.6 35B A3B4 bit · 19,7 GB · 45–80 tok/sKod içinQwen3 Coder 30B A3B Instruct4 bit · 17,2 GB · 40–72 tok/s

İyi çalışanlar 29

Bağlam için yer kalarak sığar, saniyede 10 veya daha fazla token.

ModelSürümBellekToken/s
Qwen3.6 35B A3B35B · 3B etkin · Zekâ 18,24 bit19,7 GB45–80
Nemotron 3.5 Lightning 30B A3B30B · 3B etkin · Zekâ 12,94 bit16,9 GB45–80
MiniCPM5 2B2,52B · Zekâ 12,58 bit2,7 GB28–50
Qwen3.5 9B9B · Zekâ 11,26 bit7,3 GB10–19
Granite 4.2 8B8B · Zekâ 11,16 bit6,5 GB12–21
Granite 4.2 3B3B · Zekâ 9,18 bit3,2 GB24–43
gpt-oss-20b21B · 3,6B etkin · Zekâ 9yerel 4,25 bit13,8 GB40–72
Nemotron 3 Nano 30B A3B30B · 3,5B etkin · Zekâ 8,94 bit16,9 GB38–68
Gemma 4 E4B8B · Zekâ 8,98 bit8,5 GB16–28
Ministral 3 8B8,9B · Zekâ 5,56 bit7,2 GB11–19
Nemotron 3 Nano 4B3,97B · Zekâ 4,88 bit4,2 GB18–32
Qwen3 Coder 30B A3B Instruct30,5B · 3,3B etkin4 bit17,2 GB40–72
GLM-4.7 Flash30B · 3B etkin4 bit16,9 GB45–80
Gemma 4 26B A4B25,2B · 3,8B etkin6 bit20,5 GB25–44
LFM2.5 24B A2B24B · 2B etkin6 bit19,5 GB48–85
Phi-4 (14B)14B4 bit7,9 GB10–17
Gemma 4 12B Unified12B4 bit6,7 GB11–20
Qwen3 8B8,2B6 bit6,7 GB11–20
Llama 3.1 8B Instruct8B6 bit6,5 GB12–21
Gemma 4 E2B5,1B8 bit5,4 GB32–57
Qwen3.5 4B4B8 bit4,3 GB18–32
Phi-4 mini instruct3,8B8 bit4 GB19–34
Llama 3.2 3B Instruct3,21B8 bit3,4 GB23–40
SmolLM3 3B3B8 bit3,2 GB24–43
LFM2.5 2.6B2,69B8 bit2,9 GB26–47
Qwen3.5 2B2B8 bit2,1 GB36–65
Llama 3.2 1B Instruct1,23B8 bit1,3 GB59–105
Qwen3.5 0.8B0,8B8 bit0,9 GB85–151
Qwen3 0.6B0,6B8 bit0,6 GB128–227

Çalışır ama yavaş 10

Sığar ama saniyede 10 tokenın altında: toplu işler için uygun, sohbet için yavaş.

ModelSürümBellekToken/s
Qwen3.8 27B27B · Zekâ 33,76 bit21,9 GB3–6
Muse Glimmer 30B29,6B · Zekâ 17,54 bit16,7 GB5–8
Gemma 4 31B30,7B · Zekâ 14,74 bit17,3 GB4–8
Granite 4.2 30B30B · Zekâ 12,74 bit16,9 GB5–8
Qwen3.6 27B27B6 bit21,9 GB3–6
Devstral Small 2 (24B)24B6 bit19,5 GB4–7
Magistral Small 1.2 (2509)24B6 bit19,5 GB4–7
Mistral Small 3.2 (24B)24B6 bit19,5 GB4–7
Phi-4 Reasoning Vision 15B15B8 bit15,9 GB5–9
Llama 3.3 70B Instruct70B2 bit daha düşük kalite21,9 GB3–6

Ancak sığanlar 2

Neredeyse tüm belleği kullanır: GPU bellek sınırını yükseltin ve bağlamı kısa tutun.

ModelSürümBellekToken/s
Nemotron 3.5 Bolt 74B A9B74B · 9B etkin · Zekâ 21,42 bit daha düşük kalite23,1 GB27–49
Qwen3 Coder Next80B · 3B etkin · Zekâ 9,22 bit daha düşük kalite25 GB85–151

Çok büyük olanlar 32

2 bitte bile 32 GB'tan fazla bellek gerekir.

Diğer Mac'ler

32 GB'lık tüm Mac'ler, her çiple.

Daha fazla veya daha az bellekle M6:

Komşu çipler:

Karşı karşıya:

Herhangi bir Mac veya GPU ile karşılaştırın · Yerel yapay zekâ için M6 · Yerel LLM'ler için en iyi Mac · Tüm Mac'ler

Sorular

32 GB'lık M6 için en iyi LLM hangisi?
Yayımlanmış Intelligence Index puanı olan modeller arasında burada iyi çalışanların en yüksek puanlısı Qwen3.6 35B A3B: 4 bit, saniyede yaklaşık 45–80 token.
32 GB'lık M6, Llama 3.3 70B çalıştırabilir mi?
Evet ama yavaş: 2 bit (daha düşük kalite), saniyede yaklaşık 3–6 token.
gpt-oss-20b, M6 çipinde ne kadar hızlı?
Çipin 170 GB/s bellek bant genişliğiyle saniyede yaklaşık 40–72 token (yerel 4,25 bit).

Bunları MLX Harness ile (ücretsiz, açık kaynak) ya da Terminal'de Apple'ın mlx-lm aracıyla çalıştırın: adım adım.

Nasıl hesaplanır

Bellek: modelin parametreleri ağırlık başına 8, 6, 4, 3 veya 2 bitte, artı MLX'in grup ölçekleri (ağırlık başına yarım bit) ya da modelin yerel biçimi; üstüne bağlam için yer. macOS varsayılan olarak GPU'nun birleşik belleğin yaklaşık %75'ini kullanmasına izin verir. Hız: bellek bant genişliğinin token başına okunan bayt sayısına bölümü, tek bir sohbet için üst sınırdır; llama.cpp'nin herkese açık Apple Silicon karşılaştırmalarında gerçek çalıştırmalar bunun yaklaşık %45 ile %80'ine ulaşır ve gösterilen aralık budur. Bunlar ölçüm değil tahmindir: kendi Mac'inizi MLX Bench ile ölçün. Model verileri her modelin resmî model kartından, çip verileri Apple'ın Teknik Özellikler sayfalarından alınmıştır. Kontrol tarihi: 2026-10-19. mlx.app/compare ile aynı veriler.

32 GB'lık M6 hangi LLM'leri çalıştırır? Modeller ve hız