کیا Mac پر Qwen3 Coder 30B A3B Instruct چل سکتا ہے؟

جی ہاں، 32 GB یا زیادہ یونیفائیڈ میموری کے ساتھ۔ Qwen3 Coder 30B A3B Instruct میں 30.5B پیرامیٹرز ہیں، جن میں سے ہر ٹوکن کے لیے 3.3B فعال ہوتے ہیں؛ یہاں ہر پریسیژن پر درکار میموری ہے اور یہ کہ ہر Apple چپ اسے کتنی تیزی سے چلاتی ہے۔

4-bit پر میموری18.7 GBویٹس 17.2 GB + کانٹیکسٹ
سب سے چھوٹا Mac32 GB4-bit · 55 Mac کنفیگریشنز
سب سے تیز Mac154–274ٹوکن/سیکنڈ · M5 Ultra 96 GB (اندازہ)

ہر پریسیژن پر میموری

ورژنویٹسکانٹیکسٹ کے ساتھسب سے چھوٹا Mac
8-bit32.4 GB35 GB48 GB
6-bit24.8 GB26.8 GB36 GB
4-bit17.2 GB18.7 GB32 GB
3-bit کم معیار13.3 GB14.8 GB24 GB
2-bit کم معیار9.5 GB11 GB16 GB

ہر Apple چپ پر

ہر چپ کا سب سے کم میموری سائز جو Qwen3 Coder 30B A3B Instruct چلاتا ہے، اس میں سمانے والا بہترین ورژن، اور لکھنے کی متوقع رفتار۔

چپدرکارورژنٹوکن/سیکنڈ
M632 GB4-bit اچھا چلتا ہے40–72
M5 Ultra96 GB8-bit اچھا چلتا ہے154–274
M5 Max36 GB6-bit اچھا چلتا ہے77–136
M5 Pro48 GB8-bit اچھا چلتا ہے39–70
M532 GB4-bit اچھا چلتا ہے36–64
M4 Max36 GB6-bit اچھا چلتا ہے68–121
M4 Pro48 GB8-bit اچھا چلتا ہے35–62
M432 GB4-bit اچھا چلتا ہے28–51
M3 Ultra96 GB8-bit اچھا چلتا ہے105–187
M3 Max36 GB6-bit اچھا چلتا ہے50–89
M3 Pro36 GB6-bit اچھا چلتا ہے25–44
M316 GB2-bit اچھا چلتا ہے45–80
M2 Ultra64 GB8-bit اچھا چلتا ہے103–183
M2 Max32 GB4-bit اچھا چلتا ہے95–168
M2 Pro32 GB4-bit اچھا چلتا ہے47–84
M216 GB2-bit اچھا چلتا ہے45–80
M1 Ultra64 GB8-bit اچھا چلتا ہے103–183
M1 Max32 GB4-bit اچھا چلتا ہے95–168
M1 Pro32 GB4-bit اچھا چلتا ہے47–84
M116 GB2-bit اچھا چلتا ہے31–54

اسے کیسے چلائیں

  1. آسان طریقہ: MLX Harness ڈاؤن لوڈ کریں، مفت اور اوپن سورس۔ Qwen3 Coder 30B A3B Instruct تلاش کریں، وہ ورژن ڈاؤن لوڈ کریں جو آپ کے Mac میں سماتا ہو، اور چیٹ کریں۔ یہ OpenAI سے مطابقت رکھنے والی API کے ذریعے ماڈل کو آپ کی دوسری ایپس کو بھی فراہم کرتا ہے۔MLX Harness ڈاؤن لوڈ کریںمفت · Apple Silicon · macOS 14.5 یا نیا
  2. Terminal میں Apple کے MLX کے ساتھ:pip install mlx-lmmlx_lm.chat --model mlx-community/Qwen3-Coder-30B-A3B-Instruct-4bitبلڈ: Hugging Face پر mlx-community/Qwen3-Coder-30B-A3B-Instruct-4bit۔ دوسری پریسیژنز اسی کے ساتھ موجود ہیں۔

مرحلہ وار: Mac پر LLMs ڈاؤن لوڈ کریں اور چلائیں · MLX Harness کیسے استعمال کریں · MLX بمقابلہ Ollama بمقابلہ llama.cpp

Qwen3 Coder 30B A3B Instruct کے بارے میں

بنانے والاQwen (Alibaba)
پیرامیٹرزکل 30.5B · فعال 3.3B (mixture-of-experts)
کانٹیکسٹ256K ٹوکن
لائسنسApache-2.0
ریلیز2025-07
ان پٹٹیکسٹ
ویٹسQwen/Qwen3-Coder-30B-A3B-Instruct

سوالات

Qwen3 Coder 30B A3B Instruct کو کتنی میموری چاہیے؟
4-bit پر ویٹس کے لیے تقریباً 17.2 GB، اور کانٹیکسٹ کی گنجائش: کل 18.7 GB۔ Mac پر اس کا مطلب ہے 32 GB یا زیادہ یونیفائیڈ میموری، کیونکہ macOS ڈیفالٹ طور پر GPU کو اس کا تقریباً 75% استعمال کرنے دیتا ہے۔
Mac پر Qwen3 Coder 30B A3B Instruct کتنا تیز ہے؟
لکھنے کی رفتار میموری بینڈوڈتھ پر منحصر ہے۔ یہاں اس کے لیے سب سے تیز Mac، 96 GB والا M5 Ultra ہے، فی سیکنڈ تقریباً 154–274 ٹوکن (8-bit)۔ اسے چلانے والا سب سے چھوٹا Mac، 32 GB کے ساتھ، M2 Max پر تقریباً 95–168 تک پہنچتا ہے۔
Qwen3 Coder 30B A3B Instruct اپنے سائز کی توقع سے زیادہ تیز کیوں چلتا ہے؟
یہ mixture-of-experts ماڈل ہے: یہ میموری میں 30.5B پیرامیٹرز رکھتا ہے لیکن ہر ٹوکن کے لیے صرف 3.3B پڑھتا ہے، اس لیے یہ کہیں چھوٹے ماڈل کی رفتار سے لکھتا ہے۔

ملتے جلتے ماڈلز

تمام ماڈلز · تمام Mac · اپنے Mac کا موازنہ کریں

آپ کے ماڈل کارڈ یا README کے لیے

Runs on a Mac: Qwen3 Coder 30B A3B Instruct وہ سب سے چھوٹا Mac دکھاتا ہے جو Qwen3 Coder 30B A3B Instruct کو اچھا چلاتا ہے، اور یہاں لنک کرتا ہے۔

[![Runs on a Mac](https://mlx.app/badge/run/qwen3-coder-30b-a3b.svg)](https://mlx.app/run/qwen3-coder-30b-a3b)

یہ کیسے نکالا گیا

میموری: ماڈل کے پیرامیٹرز فی ویٹ 8، 6، 4، 3 یا 2 bits پر، ساتھ MLX کے گروپ اسکیلز (فی ویٹ آدھا bit)، یا اس کا اصل فارمیٹ، اور اوپر سے کانٹیکسٹ کی گنجائش۔ macOS ڈیفالٹ طور پر GPU کو یونیفائیڈ میموری کا تقریباً 75% استعمال کرنے دیتا ہے۔ رفتار: میموری بینڈوڈتھ کو فی ٹوکن پڑھے جانے والے بائٹس سے تقسیم کریں تو ایک گفتگو کی حد ملتی ہے؛ llama.cpp کے Apple Silicon پر پبلک بینچ مارکس میں اصل رنز اس کے تقریباً 45% سے 80% تک پہنچتے ہیں، اور یہی رینج دکھائی گئی ہے۔ یہ اندازے ہیں، پیمائشیں نہیں: اپنا Mac MLX Bench پر ناپیں۔ ماڈل کے اعداد ہر ماڈل کے آفیشل ماڈل کارڈ سے، چپ کے اعداد Apple کی Tech Specs سے۔ 2026-10-19 کو چیک کیا گیا۔ وہی ڈیٹا جو mlx.app/compare پر ہے۔

کیا Mac پر Qwen3 Coder 30B A3B Instruct چلے گا؟ میموری اور رفتار