Her hassasiyette bellek
| Sürüm | Ağırlıklar | Bağlamla | En küçük Mac |
|---|---|---|---|
| yerel 4,25 bit | 65,3 GB | 70,5 GB | 96 GB |
| 3 bit daha düşük kalite | 51,2 GB | 55,3 GB | 96 GB |
| 2 bit daha düşük kalite | 36,6 GB | 39,5 GB | 64 GB |
Her Apple çipinde
Her çipin gpt-oss-120b modelini çalıştıran en küçük bellek boyutu, ona sığan en iyi sürüm ve bekleyebileceğiniz yazma hızı.
| Çip | Gereken | Sürüm | Token/s |
|---|---|---|---|
| M6 | hiçbir boyut yetmez | Çok büyük | – |
| M5 Ultra | 96 GB | yerel 4,25 bit İyi çalışır | 200–356 |
| M5 Max | 128 GB | yerel 4,25 bit İyi çalışır | 102–182 |
| M5 Pro | 64 GB | 2 bit İyi çalışır | 86–154 |
| M5 | hiçbir boyut yetmez | Çok büyük | – |
| M4 Max | 128 GB | yerel 4,25 bit İyi çalışır | 91–162 |
| M4 Pro | 64 GB | 2 bit İyi çalışır | 77–137 |
| M4 | hiçbir boyut yetmez | Çok büyük | – |
| M3 Ultra | 96 GB | yerel 4,25 bit İyi çalışır | 137–243 |
| M3 Max | 96 GB | yerel 4,25 bit İyi çalışır | 50–89 |
| M3 Pro | hiçbir boyut yetmez | Çok büyük | – |
| M3 | hiçbir boyut yetmez | Çok büyük | – |
| M2 Ultra | 128 GB | yerel 4,25 bit İyi çalışır | 133–237 |
| M2 Max | 96 GB | yerel 4,25 bit İyi çalışır | 67–119 |
| M2 Pro | hiçbir boyut yetmez | Çok büyük | – |
| M2 | hiçbir boyut yetmez | Çok büyük | – |
| M1 Ultra | 128 GB | yerel 4,25 bit İyi çalışır | 133–237 |
| M1 Max | 64 GB | 2 bit İyi çalışır | 113–200 |
| M1 Pro | hiçbir boyut yetmez | Çok büyük | – |
| M1 | hiçbir boyut yetmez | Çok büyük | – |
Nasıl çalıştırılır
- Kolay yol: ücretsiz ve açık kaynak MLX Harness uygulamasını indirin. gpt-oss-120b modelini arayın, Mac'inize uyan sürümü indirin ve sohbet edin. Model, OpenAI uyumlu bir API üzerinden diğer uygulamalarınıza da sunulur.MLX Harness'yu indirinÜcretsiz · Apple Silicon · macOS 14.5 veya üstü
- Apple'ın MLX'iyle Terminal'de:
pip install mlx-lmmlx_lm.chat --model mlx-community/gpt-oss-120b-MXFP4-Q8Derleme: Hugging Face'te mlx-community/gpt-oss-120b-MXFP4-Q8. Diğer hassasiyetler hemen yanında.
Adım adım: Mac'te LLM indirip çalıştırma · MLX Harness nasıl kullanılır · MLX, Ollama ve llama.cpp karşılaştırması
gpt-oss-120b hakkında
| Geliştiren | OpenAI |
|---|---|
| Parametreler | 117B toplam · 5,1B etkin (mixture of experts) |
| Bağlam | 128K token |
| Lisans | Apache-2.0 |
| Yayın tarihi | 2025-08 |
| Girdi | Metin |
| Zekâ | Artificial Analysis Intelligence Index puanı: 11,6 |
| Ağırlıklar | openai/gpt-oss-120b |
Rehber: mlx.app'te adım adım
Sorular
- gpt-oss-120b ne kadar bellek gerektirir?
- yerel 4,25 bit ile yaklaşık 65,3 GB ağırlık, artı bağlam için yer: toplam 70,5 GB. macOS varsayılan olarak GPU'nun belleğin yaklaşık %75'ini kullanmasına izin verdiği için bu, Mac'te 96 GB veya daha fazla birleşik bellek demektir.
- gpt-oss-120b Mac'te ne kadar hızlı?
- Yazma hızı bellek bant genişliğine bağlıdır. Burada onun için en hızlı Mac, 96 GB'lık M5 Ultra: saniyede yaklaşık 200–356 token (yerel 4,25 bit). Onu çalıştıran en küçük Mac, 96 GB'lık M5 Ultra, yaklaşık 200–356 token yazar.
- gpt-oss-120b neden boyutunun düşündürdüğünden hızlı çalışır?
- Bu bir mixture-of-experts modeli: bellekte 117B parametre tutar ama her token için yalnızca 5,1B kadarını okur, bu yüzden çok daha küçük bir modelin hızında yazar.
Benzer modeller
Model kartınız veya README için
gpt-oss-120b modelini iyi çalıştıran en küçük Mac'i gösterir ve buraya bağlantı verir.
[](https://mlx.app/run/gpt-oss-120b)Nasıl hesaplanır
Bellek: modelin parametreleri ağırlık başına 8, 6, 4, 3 veya 2 bitte, artı MLX'in grup ölçekleri (ağırlık başına yarım bit) ya da modelin yerel biçimi; üstüne bağlam için yer. macOS varsayılan olarak GPU'nun birleşik belleğin yaklaşık %75'ini kullanmasına izin verir. Hız: bellek bant genişliğinin token başına okunan bayt sayısına bölümü, tek bir sohbet için üst sınırdır; llama.cpp'nin herkese açık Apple Silicon karşılaştırmalarında gerçek çalıştırmalar bunun yaklaşık %45 ile %80'ine ulaşır ve gösterilen aralık budur. Bunlar ölçüm değil tahmindir: kendi Mac'inizi MLX Bench ile ölçün. Model verileri her modelin resmî model kartından, çip verileri Apple'ın Teknik Özellikler sayfalarından alınmıştır. Kontrol tarihi: 2026-10-19. mlx.app/compare ile aynı veriler.