یک M6 با 32 GB چه چیزهایی را اجرا می‌کند؟

29 از 73 مدل باز روی آن خوب اجرا می‌شوند. GPU به‌طور پیش‌فرض می‌تواند حدود 24 GB از 32 GB آن را استفاده کند و حافظه را با 170 GB/s می‌خواند، که سرعت نوشتن را تعیین می‌کند. در: Mac mini (M6 or M5 Pro).

باهوش‌ترین که خوب اجرا می‌شودQwen3.6 35B A3B4 بیت · 19.7 GB · 45–80 tok/sبزرگ‌ترین که خوب اجرا می‌شودQwen3.6 35B A3B4 بیت · 19.7 GB · 45–80 tok/sبرای کدنویسیQwen3 Coder 30B A3B Instruct4 بیت · 17.2 GB · 40–72 tok/s

خوب اجرا می‌شوند 29

با جای کافی برای کانتکست جا می‌شود، با 10 توکن یا بیشتر در ثانیه.

مدلنسخهحافظهتوکن/ثانیه
Qwen3.6 35B A3B35B · 3B فعال · هوش 18.24 بیت19.7 GB45–80
Nemotron 3.5 Lightning 30B A3B30B · 3B فعال · هوش 12.94 بیت16.9 GB45–80
MiniCPM5 2B2.52B · هوش 12.58 بیت2.7 GB28–50
Qwen3.5 9B9B · هوش 11.26 بیت7.3 GB10–19
Granite 4.2 8B8B · هوش 11.16 بیت6.5 GB12–21
Granite 4.2 3B3B · هوش 9.18 بیت3.2 GB24–43
gpt-oss-20b21B · 3.6B فعال · هوش 94.25 بیت اصلی13.8 GB40–72
Nemotron 3 Nano 30B A3B30B · 3.5B فعال · هوش 8.94 بیت16.9 GB38–68
Gemma 4 E4B8B · هوش 8.98 بیت8.5 GB16–28
Ministral 3 8B8.9B · هوش 5.56 بیت7.2 GB11–19
Nemotron 3 Nano 4B3.97B · هوش 4.88 بیت4.2 GB18–32
Qwen3 Coder 30B A3B Instruct30.5B · 3.3B فعال4 بیت17.2 GB40–72
GLM-4.7 Flash30B · 3B فعال4 بیت16.9 GB45–80
Gemma 4 26B A4B25.2B · 3.8B فعال6 بیت20.5 GB25–44
LFM2.5 24B A2B24B · 2B فعال6 بیت19.5 GB48–85
Phi-4 (14B)14B4 بیت7.9 GB10–17
Gemma 4 12B Unified12B4 بیت6.7 GB11–20
Qwen3 8B8.2B6 بیت6.7 GB11–20
Llama 3.1 8B Instruct8B6 بیت6.5 GB12–21
Gemma 4 E2B5.1B8 بیت5.4 GB32–57
Qwen3.5 4B4B8 بیت4.3 GB18–32
Phi-4 mini instruct3.8B8 بیت4 GB19–34
Llama 3.2 3B Instruct3.21B8 بیت3.4 GB23–40
SmolLM3 3B3B8 بیت3.2 GB24–43
LFM2.5 2.6B2.69B8 بیت2.9 GB26–47
Qwen3.5 2B2B8 بیت2.1 GB36–65
Llama 3.2 1B Instruct1.23B8 بیت1.3 GB59–105
Qwen3.5 0.8B0.8B8 بیت0.9 GB85–151
Qwen3 0.6B0.6B8 بیت0.6 GB128–227

اجرا می‌شوند، اما کند 10

جا می‌شود، اما زیر 10 توکن در ثانیه: برای کارهای دسته‌ای خوب است، برای گفت‌وگو کند.

مدلنسخهحافظهتوکن/ثانیه
Qwen3.8 27B27B · هوش 33.76 بیت21.9 GB3–6
Muse Glimmer 30B29.6B · هوش 17.54 بیت16.7 GB5–8
Gemma 4 31B30.7B · هوش 14.74 بیت17.3 GB4–8
Granite 4.2 30B30B · هوش 12.74 بیت16.9 GB5–8
Qwen3.6 27B27B6 بیت21.9 GB3–6
Devstral Small 2 (24B)24B6 بیت19.5 GB4–7
Magistral Small 1.2 (2509)24B6 بیت19.5 GB4–7
Mistral Small 3.2 (24B)24B6 بیت19.5 GB4–7
Phi-4 Reasoning Vision 15B15B8 بیت15.9 GB5–9
Llama 3.3 70B Instruct70B2 بیت کیفیت پایین‌تر21.9 GB3–6

به‌زحمت جا می‌شوند 2

تقریباً همهٔ حافظه را لازم دارد: سقف حافظهٔ GPU را بالا ببرید و کانتکست را کوتاه نگه دارید.

مدلنسخهحافظهتوکن/ثانیه
Nemotron 3.5 Bolt 74B A9B74B · 9B فعال · هوش 21.42 بیت کیفیت پایین‌تر23.1 GB27–49
Qwen3 Coder Next80B · 3B فعال · هوش 9.22 بیت کیفیت پایین‌تر25 GB85–151

خیلی بزرگ 32

حتی در 2 بیت، بیش از 32 GB حافظه لازم دارد.

Macهای دیگر

همهٔ Macها با 32 GB، با هر تراشه‌ای.

M6 با حافظهٔ بیشتر یا کمتر:

تراشه‌های همسایه:

رودررو:

آن را با هر Mac یا GPU مقایسه کنید · تراشهٔ M6 برای هوش مصنوعی محلی · بهترین Mac برای LLM محلی · همهٔ Macها

پرسش‌ها

بهترین LLM برای یک M6 با 32 GB کدام است؟
از میان مدل‌هایی که Intelligence Index منتشرشده دارند، Qwen3.6 35B A3B بالاترین امتیاز را در بین مدل‌هایی دارد که اینجا خوب اجرا می‌شوند: 4 بیت، حدود 45–80 توکن در ثانیه.
آیا یک M6 با 32 GB می‌تواند Llama 3.3 70B را اجرا کند؟
بله، اما کند: 2 بیت (کیفیت پایین‌تر)، با حدود 3–6 توکن در ثانیه.
gpt-oss-20b روی یک M6 چقدر سریع است؟
حدود 40–72 توکن در ثانیه (4.25 بیت اصلی)، بر پایهٔ پهنای باند حافظهٔ 170 GB/s این تراشه.

آن‌ها را با MLX Harness (رایگان و متن‌باز) یا mlx-lm از Apple در Terminal اجرا کنید: گام به گام.

چطور محاسبه شده

حافظه: پارامترهای مدل در 8، 6، 4، 3 یا 2 بیت برای هر وزن به‌علاوهٔ مقیاس‌های گروهی MLX (نیم بیت برای هر وزن)، یا قالب اصلی آن، به‌اضافهٔ جا برای کانتکست. macOS به‌طور پیش‌فرض اجازه می‌دهد GPU حدود 75% حافظهٔ یکپارچه را استفاده کند. سرعت: پهنای باند حافظه تقسیم بر بایت‌هایی که برای هر توکن خوانده می‌شود، سقف سرعت یک گفت‌وگوست؛ در بنچمارک‌های عمومی llama.cpp روی Apple Silicon اجراهای واقعی به حدود 45% تا 80% آن می‌رسند و همین بازه نمایش داده می‌شود. این‌ها برآوردند، نه اندازه‌گیری: Mac خودتان را روی MLX Bench بسنجید. ارقام مدل‌ها از کارت رسمی هر مدل و ارقام تراشه‌ها از مشخصات فنی Apple است. بررسی‌شده در 2026-10-19. همان داده‌های mlx.app/compare.

یک M6 با 32 GB چه LLMهایی را اجرا می‌کند؟ مدل‌ها و سرعت