Her hassasiyette bellek
| Sürüm | Ağırlıklar | Bağlamla | En küçük Mac |
|---|---|---|---|
| 8 bit | 32,6 GB | 35,2 GB | 48 GB |
| 6 bit | 24,9 GB | 26,9 GB | 36 GB |
| 4 bit | 17,3 GB | 18,8 GB | 32 GB |
| 3 bit daha düşük kalite | 13,4 GB | 14,9 GB | 24 GB |
| 2 bit daha düşük kalite | 9,6 GB | 11,1 GB | 16 GB |
Her Apple çipinde
Her çipin Gemma 4 31B modelini çalıştıran en küçük bellek boyutu, ona sığan en iyi sürüm ve bekleyebileceğiniz yazma hızı.
| Çip | Gereken | Sürüm | Token/s |
|---|---|---|---|
| M6 | 32 GB | 4 bit Yavaş | 4–8 |
| M5 Ultra | 96 GB | 8 bit İyi çalışır | 17–29 |
| M5 Max | 36 GB | 4 bit İyi çalışır | 12–21 |
| M5 Pro | 48 GB | 8 bit Yavaş | 4–8 |
| M5 | 32 GB | 4 bit Yavaş | 4–7 |
| M4 Max | 36 GB | 4 bit İyi çalışır | 11–19 |
| M4 Pro | 48 GB | 8 bit Yavaş | 4–7 |
| M4 | 32 GB | 4 bit Yavaş | 3–6 |
| M3 Ultra | 96 GB | 8 bit İyi çalışır | 11–20 |
| M3 Max | 36 GB | 6 bit Yavaş | 5–10 |
| M3 Pro | 36 GB | 6 bit Yavaş | 3–5 |
| M3 | 16 GB | 2 bit Yavaş | 5–8 |
| M2 Ultra | 64 GB | 8 bit İyi çalışır | 11–20 |
| M2 Max | 32 GB | 4 bit İyi çalışır | 10–18 |
| M2 Pro | 32 GB | 4 bit Yavaş | 5–9 |
| M2 | 16 GB | 2 bit Yavaş | 5–8 |
| M1 Ultra | 64 GB | 8 bit İyi çalışır | 11–20 |
| M1 Max | 32 GB | 4 bit İyi çalışır | 10–18 |
| M1 Pro | 32 GB | 4 bit Yavaş | 5–9 |
| M1 | 16 GB | 2 bit Yavaş | 3–6 |
Nasıl çalıştırılır
- Kolay yol: ücretsiz ve açık kaynak MLX Harness uygulamasını indirin. Gemma 4 31B modelini arayın, Mac'inize uyan sürümü indirin ve sohbet edin. Model, OpenAI uyumlu bir API üzerinden diğer uygulamalarınıza da sunulur.MLX Harness'yu indirinÜcretsiz · Apple Silicon · macOS 14.5 veya üstü
- Apple'ın MLX'iyle Terminal'de:
pip install mlx-lmmlx_lm.chat --model mlx-community/gemma-4-31b-it-4bitDerleme: Hugging Face'te mlx-community/gemma-4-31b-it-4bit. Diğer hassasiyetler hemen yanında.
Adım adım: Mac'te LLM indirip çalıştırma · MLX Harness nasıl kullanılır · MLX, Ollama ve llama.cpp karşılaştırması
Gemma 4 31B hakkında
| Geliştiren | Google DeepMind |
|---|---|
| Parametreler | 30,7B (yoğun) |
| Bağlam | 256K token |
| Lisans | Apache-2.0 |
| Yayın tarihi | 2026-03 |
| Girdi | Metin ve görseller |
| Zekâ | Artificial Analysis Intelligence Index puanı: 14,7 |
| Ağırlıklar | google/gemma-4-31B-it |
Sorular
- Gemma 4 31B ne kadar bellek gerektirir?
- 4 bit ile yaklaşık 17,3 GB ağırlık, artı bağlam için yer: toplam 18,8 GB. macOS varsayılan olarak GPU'nun belleğin yaklaşık %75'ini kullanmasına izin verdiği için bu, Mac'te 32 GB veya daha fazla birleşik bellek demektir.
- Gemma 4 31B Mac'te ne kadar hızlı?
- Yazma hızı bellek bant genişliğine bağlıdır. Burada onun için en hızlı Mac, 96 GB'lık M5 Ultra: saniyede yaklaşık 17–29 token (8 bit). Onu çalıştıran en küçük Mac, 32 GB'lık M2 Max, yaklaşık 10–18 token yazar.
- Kuantizasyon Gemma 4 31B modeline zarar verir mi?
- 4 bitte çoğu model özgün kaliteye yakın kalır; 4 bitin altında kalite daha hızlı düşer. Mac'inize pay bırakarak sığan en yüksek hassasiyeti seçin.
Benzer modeller
Model kartınız veya README için
Gemma 4 31B modelini iyi çalıştıran en küçük Mac'i gösterir ve buraya bağlantı verir.
[](https://mlx.app/run/gemma-4-31b)Nasıl hesaplanır
Bellek: modelin parametreleri ağırlık başına 8, 6, 4, 3 veya 2 bitte, artı MLX'in grup ölçekleri (ağırlık başına yarım bit) ya da modelin yerel biçimi; üstüne bağlam için yer. macOS varsayılan olarak GPU'nun birleşik belleğin yaklaşık %75'ini kullanmasına izin verir. Hız: bellek bant genişliğinin token başına okunan bayt sayısına bölümü, tek bir sohbet için üst sınırdır; llama.cpp'nin herkese açık Apple Silicon karşılaştırmalarında gerçek çalıştırmalar bunun yaklaşık %45 ile %80'ine ulaşır ve gösterilen aralık budur. Bunlar ölçüm değil tahmindir: kendi Mac'inizi MLX Bench ile ölçün. Model verileri her modelin resmî model kartından, çip verileri Apple'ın Teknik Özellikler sayfalarından alınmıştır. Kontrol tarihi: 2026-10-19. mlx.app/compare ile aynı veriler.