میموری سائز کے لحاظ سے
| میموری | اچھے چلتے ہیں | اچھا چلنے والا سب سے بڑا | gpt-oss-20b |
|---|---|---|---|
| 36 GB460 GB/s | 38 | Qwen3.6 35B A3B | 109–194 tok/s |
| 48 GB614 GB/s | 38 | Qwen3.6 35B A3B | 145–259 tok/s |
| 64 GB614 GB/s | 39 | Nemotron 3.5 Bolt 74B A9B | 145–259 tok/s |
| 128 GB614 GB/s | 47 | Qwen3.5 122B A10B | 145–259 tok/s |
Mac ماڈلز: Mac Studio (M5 Max or M5 Ultra)۔ ہر میموری سائز ہر Mac ماڈل کے ساتھ دستیاب نہیں؛ Apple کی Tech Specs بتاتی ہیں کہ ہر ایک کس کے ساتھ آتا ہے۔
سوالات
- کیا M5 Max والا Mac Studio لوکل LLMs کے لیے اچھا ہے؟
- 128 GB کے ساتھ یہ 73 اوپن ماڈلز میں سے 47 اچھے چلاتا ہے، Qwen3.5 122B A10B تک، اور gpt-oss-20b کے ساتھ فی سیکنڈ تقریباً 145–259 ٹوکن لکھتا ہے۔ M5 Max میموری کو 614 GB/s پر پڑھتا ہے، جو لکھنے کی رفتار طے کرتی ہے۔
- AI کے لیے M5 Max والے Mac Studio میں کتنی میموری ہونی چاہیے؟
- 36 GB کے ساتھ یہ 38 اوپن ماڈلز اچھے چلاتا ہے؛ 128 GB کے ساتھ 47، Qwen3.5 122B A10B تک۔ میموری طے کرتی ہے کہ کون سے ماڈلز سمائیں گے، اور اسے بعد میں بڑھایا نہیں جا سکتا۔
دوسرے Mac
دوسری چپس کے ساتھ Mac Studio:
- Mac Studio M5 Ultra
- Mac Studio M4 Max
- Mac Studio M3 Ultra
- Mac Studio M2 Max
- Mac Studio M2 Ultra
- Mac Studio M1 Max
- Mac Studio M1 Ultra
M5 Max والے دوسرے Mac:
آمنے سامنے:
- M1 Max vs M5 Max
- M3 Ultra vs M5 Max
- M4 Pro vs M5 Max
- M4 Max vs M5 Max
- M5 Pro vs M5 Max
- M5 Max vs M5 Ultra
PC اور گرافکس کارڈز کے مقابلے میں:
لوکل AI کے لیے M5 Max · لوکل LLMs کے لیے بہترین Mac · تمام Mac
یہ کیسے نکالا گیا
میموری: ماڈل کے پیرامیٹرز فی ویٹ 8، 6، 4، 3 یا 2 bits پر، ساتھ MLX کے گروپ اسکیلز (فی ویٹ آدھا bit)، یا اس کا اصل فارمیٹ، اور اوپر سے کانٹیکسٹ کی گنجائش۔ macOS ڈیفالٹ طور پر GPU کو یونیفائیڈ میموری کا تقریباً 75% استعمال کرنے دیتا ہے۔ رفتار: میموری بینڈوڈتھ کو فی ٹوکن پڑھے جانے والے بائٹس سے تقسیم کریں تو ایک گفتگو کی حد ملتی ہے؛ llama.cpp کے Apple Silicon پر پبلک بینچ مارکس میں اصل رنز اس کے تقریباً 45% سے 80% تک پہنچتے ہیں، اور یہی رینج دکھائی گئی ہے۔ یہ اندازے ہیں، پیمائشیں نہیں: اپنا Mac MLX Bench پر ناپیں۔ ماڈل کے اعداد ہر ماڈل کے آفیشل ماڈل کارڈ سے، چپ کے اعداد Apple کی Tech Specs سے۔ 2026-10-19 کو چیک کیا گیا۔ وہی ڈیٹا جو mlx.app/compare پر ہے۔