Giriş yapCüzdan oluştur

192 GB'lık M2 Ultra neleri çalıştırır?

73 açık modelden 49 tanesi bu Mac'te iyi çalışır. GPU varsayılan olarak 192 GB'ın yaklaşık 144 GB'ını kullanabilir ve bellek 800 GB/s hızla okunur; yazma hızını bu belirler. Bulunduğu modeller: Mac Studio (2023), Mac Pro (2023), Mac Pro (Rack, 2023).

İyi çalışanların en akıllısıQwen3.8 Flash Next4 bit · 101 GB · 106–188 tok/sİyi çalışanların en büyüğüMiniMax M2.74 bit · 129 GB · 64–114 tok/sKod içinQwen3 Coder Next8 bit · 85 GB · 113–200 tok/s

İyi çalışanlar 56

Bağlam için yer kalarak sığar, saniyede 10 veya daha fazla token.

ModelSürümBellekToken/s
Qwen3.8 Flash Next180B · 6B etkin · Zekâ 39,84 bit101 GB106–188
Qwen3.8 27B27B · Zekâ 33,78 bit28,7 GB13–22
Nemotron 3.5 Bolt 74B A9B74B · 9B etkin · Zekâ 21,48 bit78,6 GB38–67
Qwen3.6 35B A3B35B · 3B etkin · Zekâ 18,28 bit37,2 GB113–200
Muse Glimmer 30B29,6B · Zekâ 17,58 bit31,5 GB11–20
Qwen3.5 122B A10B122B · 10B etkin · Zekâ 15,68 bit130 GB34–60
Gemma 4 31B30,7B · Zekâ 14,78 bit32,6 GB11–20
Nemotron 3.5 Lightning 30B A3B30B · 3B etkin · Zekâ 12,98 bit31,9 GB113–200
Granite 4.2 30B30B · Zekâ 12,78 bit31,9 GB11–20
MiniCPM5 2B2,52B · Zekâ 12,58 bit2,7 GB133–237
gpt-oss-120b117B · 5,1B etkin · Zekâ 11,6yerel 4,25 bit65,3 GB133–237
Mistral Small 4 (119B)119B · 6,5B etkin · Zekâ 11,38 bit126 GB52–93
Qwen3.5 9B9B · Zekâ 11,28 bit9,6 GB38–67
Granite 4.2 8B8B · Zekâ 11,18 bit8,5 GB42–75
Qwen3 Coder Next80B · 3B etkin · Zekâ 9,28 bit85 GB113–200
Granite 4.2 3B3B · Zekâ 9,18 bit3,2 GB113–200
gpt-oss-20b21B · 3,6B etkin · Zekâ 9yerel 4,25 bit13,8 GB189–337
Nemotron 3 Nano 30B A3B30B · 3,5B etkin · Zekâ 8,98 bit31,9 GB97–173
Gemma 4 E4B8B · Zekâ 8,98 bit8,5 GB75–133
Llama 4 Scout 17B-16E Instruct109B · 17B etkin · Zekâ 6,58 bit116 GB20–35
Ministral 3 8B8,9B · Zekâ 5,58 bit9,5 GB38–67
Nemotron 3 Nano 4B3,97B · Zekâ 4,88 bit4,2 GB86–152
MiniMax M2.7230B · 10B etkin4 bit129 GB64–114
Ornith 1.5 122B122B · 10B etkin8 bit130 GB34–60
Nemotron 3 Super 120B A12B120B · 12B etkin8 bit128 GB28–50
GLM-4.5 Air106B · 12B etkin8 bit113 GB28–50
Qwen3 Coder 30B A3B Instruct30,5B · 3,3B etkin8 bit32,4 GB103–183
GLM-4.7 Flash30B · 3B etkin8 bit31,9 GB113–200
Qwen3.6 27B27B8 bit28,7 GB13–22
Gemma 4 26B A4B25,2B · 3,8B etkin8 bit26,8 GB90–160
Devstral Small 2 (24B)24B8 bit25,5 GB14–25
Magistral Small 1.2 (2509)24B8 bit25,5 GB14–25
Mistral Small 3.2 (24B)24B8 bit25,5 GB14–25
LFM2.5 24B A2B24B · 2B etkin8 bit25,5 GB171–305
Phi-4 Reasoning Vision 15B15B8 bit15,9 GB23–40
Phi-4 (14B)14B8 bit14,9 GB24–43
Gemma 4 12B Unified12B8 bit12,7 GB28–50
Qwen3 8B8,2B8 bit8,7 GB41–74
Llama 3.1 8B Instruct8B8 bit8,5 GB42–75
Gemma 4 E2B5,1B8 bit5,4 GB150–267
Qwen3.5 4B4B8 bit4,3 GB84–149
Phi-4 mini instruct3,8B8 bit4 GB90–160
Llama 3.2 3B Instruct3,21B8 bit3,4 GB106–188
SmolLM3 3B3B8 bit3,2 GB113–200
LFM2.5 2.6B2,69B8 bit2,9 GB124–221
Qwen3.5 2B2B8 bit2,1 GB171–305
Llama 3.2 1B Instruct1,23B8 bit1,3 GB277–492
Qwen3.5 0.8B0,8B8 bit0,9 GB400–711
Qwen3 0.6B0,6B8 bit0,6 GB600–1067
GLM-5.3 Flash320B · 18B etkin · Zekâ 41,82 bit daha düşük kalite100 GB64–114
MiMo V2.6 Flash309B · 15B etkin · Zekâ 37,92 bit daha düşük kalite96,6 GB77–136
Inkling Small276B · 12B etkin · Zekâ 25,73 bit daha düşük kalite121 GB68–121
Hy3295B · 21B etkin · Zekâ 25,33 bit daha düşük kalite129 GB39–70
Qwen3.5 397B A17B397B · 17B etkin · Zekâ 18,42 bit daha düşük kalite124 GB68–121
Llama 4 Maverick 17B-128E Instruct400B · 17B etkin · Zekâ 9,32 bit daha düşük kalite125 GB68–121
DeepSeek V4 Flash 0731284B · 13B etkin3 bit daha düşük kalite124 GB63–112

Çalışır ama yavaş 3

Sığar ama saniyede 10 tokenın altında: toplu işler için uygun, sohbet için yavaş.

ModelSürümBellekToken/s
Mistral Medium 3.5 (128B)128B · Zekâ 14,26 bit104 GB3–6
Devstral 2 (123B)123B8 bit131 GB3–5
Llama 3.3 70B Instruct70B8 bit74,4 GB5–9

Ancak sığanlar 2

Neredeyse tüm belleği kullanır: GPU bellek sınırını yükseltin ve bağlamı kısa tutun.

ModelSürümBellekToken/s
Beam 1.0501B · 23B etkin · Zekâ 30,32 bit daha düşük kalite157 GB50–89
MiniMax M3428B · 23B etkin · Zekâ 29,22 bit daha düşük kalite134 GB50–89

Çok büyük olanlar 12

2 bitte bile 192 GB'tan fazla bellek gerekir.

Diğer Mac'ler

192 GB'lık tüm Mac'ler, her çiple.

Daha fazla veya daha az bellekle M2 Ultra:

Komşu çipler:

Karşı karşıya:

Herhangi bir Mac veya GPU ile karşılaştırın · Yerel yapay zekâ için M2 Ultra · Yerel LLM'ler için en iyi Mac · Tüm Mac'ler

Sorular

192 GB'lık M2 Ultra için en iyi LLM hangisi?
Yayımlanmış Intelligence Index puanı olan modeller arasında burada iyi çalışanların en yüksek puanlısı Qwen3.8 Flash Next: 4 bit, saniyede yaklaşık 106–188 token. İyi çalışanların en büyüğü MiniMax M2.7.
192 GB'lık M2 Ultra, Llama 3.3 70B çalıştırabilir mi?
Evet ama yavaş: 8 bit, saniyede yaklaşık 5–9 token.
gpt-oss-20b, M2 Ultra çipinde ne kadar hızlı?
Çipin 800 GB/s bellek bant genişliğiyle saniyede yaklaşık 189–337 token (yerel 4,25 bit).

Bunları MLX Harness ile (ücretsiz, açık kaynak) ya da Terminal'de Apple'ın mlx-lm aracıyla çalıştırın: adım adım.

Nasıl hesaplanır

Bellek: modelin parametreleri ağırlık başına 8, 6, 4, 3 veya 2 bitte, artı MLX'in grup ölçekleri (ağırlık başına yarım bit) ya da modelin yerel biçimi; üstüne bağlam için yer. macOS varsayılan olarak GPU'nun birleşik belleğin yaklaşık %75'ini kullanmasına izin verir. Hız: bellek bant genişliğinin token başına okunan bayt sayısına bölümü, tek bir sohbet için üst sınırdır; llama.cpp'nin herkese açık Apple Silicon karşılaştırmalarında gerçek çalıştırmalar bunun yaklaşık %45 ile %80'ine ulaşır ve gösterilen aralık budur. Bunlar ölçüm değil tahmindir: kendi Mac'inizi MLX Bench ile ölçün. Model verileri her modelin resmî model kartından, çip verileri Apple'ın Teknik Özellikler sayfalarından alınmıştır. Kontrol tarihi: 2026-10-19. mlx.app/compare ile aynı veriler.

192 GB'lık M2 Ultra hangi LLM'leri çalıştırır? Modeller ve hız