Mac Ling 3.1 Flash çalıştırabilir mi?

Evet, 512 GB veya daha fazla birleşik bellekle. Ling 3.1 Flash modelinin 560B parametresi var, bunların 25B kadarı her token için etkin. Her hassasiyette gereken bellek ve her Apple çipinin onu ne kadar hızlı çalıştırdığı aşağıda.

Güncellendi

Bellek (4 bit)340 GBağırlıklar 315 GB + bağlam
En küçük Mac512 GB4 bit · 4 Mac yapılandırması
En hızlı Mac38–68token/s · M5 Ultra 512 GB (tahmin)

Her hassasiyette bellek

SürümAğırlıklarBağlamlaEn küçük Mac
8 bit595 GB643 GBher Mac'ten fazla
6 bit455 GB491 GBher Mac'ten fazla
4 bit315 GB340 GB512 GB
3 bit daha düşük kalite245 GB265 GB512 GB
2 bit daha düşük kalite175 GB189 GB256 GB

Her Apple çipinde

Her çipin Ling 3.1 Flash modelini çalıştıran en küçük bellek boyutu, ona sığan en iyi sürüm ve bekleyebileceğiniz yazma hızı.

ÇipGerekenSürümToken/s
M6hiçbir boyut yetmezÇok büyük–
M5 Ultra512 GB4 bit İyi çalışır38–68
M5 Maxhiçbir boyut yetmezÇok büyük–
M5 Prohiçbir boyut yetmezÇok büyük–
M5hiçbir boyut yetmezÇok büyük–
M4 Maxhiçbir boyut yetmezÇok büyük–
M4 Prohiçbir boyut yetmezÇok büyük–
M4hiçbir boyut yetmezÇok büyük–
M3 Ultra512 GB4 bit İyi çalışır26–46
M3 Maxhiçbir boyut yetmezÇok büyük–
M3 Prohiçbir boyut yetmezÇok büyük–
M3hiçbir boyut yetmezÇok büyük–
M2 Ultrahiçbir boyut yetmezÇok büyük–
M2 Maxhiçbir boyut yetmezÇok büyük–
M2 Prohiçbir boyut yetmezÇok büyük–
M2hiçbir boyut yetmezÇok büyük–
M1 Ultrahiçbir boyut yetmezÇok büyük–
M1 Maxhiçbir boyut yetmezÇok büyük–
M1 Prohiçbir boyut yetmezÇok büyük–
M1hiçbir boyut yetmezÇok büyük–

Nasıl çalıştırılır

  1. Apple'ın MLX'iyle Terminal'de: Henüz bir MLX sürümü yok ve standart mlx-lm resmî ağırlıkları henüz dönüştüremiyor (bailing_moe_v3.py).

Adım adım: Mac'te LLM indirip çalıştırma · MLX Harness nasıl kullanılır · MLX, Ollama ve llama.cpp karşılaştırması

Ling 3.1 Flash hakkında

GeliştireninclusionAI
Parametreler560B toplam · 25B etkin (mixture of experts)
Bağlam256K token
LisansMIT
Yayın tarihi2026-10
GirdiMetin
ZekâArtificial Analysis Intelligence Index puanı: 41,1
AğırlıklarinclusionAI/Ling-3.1-flash

Sorular

Ling 3.1 Flash ne kadar bellek gerektirir?
4 bit ile yaklaşık 315 GB ağırlık, artı bağlam için yer: toplam 340 GB. macOS varsayılan olarak GPU'nun belleğin yaklaşık %75'ini kullanmasına izin verdiği için bu, Mac'te 512 GB veya daha fazla birleşik bellek demektir.
Ling 3.1 Flash Mac'te ne kadar hızlı?
Yazma hızı bellek bant genişliğine bağlıdır. Burada onun için en hızlı Mac, 512 GB'lık M5 Ultra: saniyede yaklaşık 38–68 token (4 bit). Onu çalıştıran en küçük Mac, 512 GB'lık M5 Ultra, yaklaşık 38–68 token yazar.
Ling 3.1 Flash neden boyutunun düşündürdüğünden hızlı çalışır?
Bu bir mixture-of-experts modeli: bellekte 560B parametre tutar ama her token için yalnızca 25B kadarını okur, bu yüzden çok daha küçük bir modelin hızında yazar.

Benzer modeller

Tüm modeller · Tüm Mac'ler · Mac'inizi karşılaştırın

Model kartınız veya README için

Runs on a Mac: Ling 3.1 Flash Ling 3.1 Flash modelini iyi çalıştıran en küçük Mac'i gösterir ve buraya bağlantı verir.

[![Runs on a Mac](https://mlx.app/badge/run/ling-3.1-flash.svg)](https://mlx.app/run/ling-3.1-flash)

Nasıl hesaplanır

Bellek: modelin parametreleri ağırlık başına 8, 6, 4, 3 veya 2 bitte, artı MLX'in grup ölçekleri (ağırlık başına yarım bit) ya da modelin yerel biçimi; üstüne bağlam için yer. macOS varsayılan olarak GPU'nun birleşik belleğin yaklaşık %75'ini kullanmasına izin verir. Hız: bellek bant genişliğinin token başına okunan bayt sayısına bölümü, tek bir sohbet için üst sınırdır; llama.cpp'nin herkese açık Apple Silicon karşılaştırmalarında gerçek çalıştırmalar bunun yaklaşık %45 ile %80'ine ulaşır ve gösterilen aralık budur. Bunlar ölçüm değil tahmindir: kendi Mac'inizi MLX Bench ile ölçün. Model verileri her modelin resmî model kartından, çip verileri Apple'ın Teknik Özellikler sayfalarından alınmıştır. Kontrol tarihi: 2026-10-19. mlx.app/compare ile aynı veriler.

Açık veri: mlx.app/data (JSON, CSV)

Mac Ling 3.1 Flash çalıştırabilir mi? Bellek ve hız