بهترین LLMها برای Mac با 24 GB.

28 از 73 مدل باز در 24 GB خوب اجرا می‌شوند. GPU به‌طور پیش‌فرض می‌تواند حدود 18 GB از آن را استفاده کند. سرعت به تراشه بستگی دارد: از 100 GB/s روی M3 تا 307 GB/s روی M5 Pro.

باهوش‌ترین که خوب اجرا می‌شودMiniCPM5 2B8 بیت · 2.7 GB · 17–91 tok/sبزرگ‌ترین که خوب اجرا می‌شودGemma 4 26B A4B4 بیت · 14.2 GB · 21–117 tok/sبرای کدنویسیDevstral Small 2 (24B)4 بیت · 13.5 GB · 3–18 tok/s

Macهای دارای 24 GB

7 تراشه از M2 تا M6 با 24 GB عرضه می‌شوند. هر کدام را برای فهرست و سرعت‌های خودش باز کنید.

خوب اجرا می‌شوند 36

با جای کافی برای کانتکست جا می‌شود، با 10 توکن یا بیشتر در ثانیه روی M5 Pro.

مدلنسخهحافظهM3M5 Pro
MiniCPM5 2B2.52B · هوش 12.58 بیت2.7 GB17–3051–91
Qwen3.5 9B9B · هوش 11.28 بیت9.6 GB5–814–26
Granite 4.2 8B8B · هوش 11.18 بیت8.5 GB10–1816–29
Granite 4.2 3B3B · هوش 9.18 بیت3.2 GB14–2543–77
gpt-oss-20b21B · 3.6B فعال · هوش 94.25 بیت اصلی13.8 GB24–4273–129
Gemma 4 E4B8B · هوش 8.98 بیت8.5 GB12–2229–51
Ministral 3 8B8.9B · هوش 5.58 بیت9.5 GB5–815–26
Nemotron 3 Nano 4B3.97B · هوش 4.88 بیت4.2 GB11–1933–58
Gemma 4 26B A4B25.2B · 3.8B فعال4 بیت14.2 GB21–3866–117
Devstral Small 2 (24B)24B4 بیت13.5 GB3–610–18
Magistral Small 1.2 (2509)24B4 بیت13.5 GB3–610–18
Mistral Small 3.2 (24B)24B4 بیت13.5 GB3–610–18
LFM2.5 24B A2B24B · 2B فعال4 بیت13.5 GB41–73126–223
Phi-4 Reasoning Vision 15B15B6 بیت12.2 GB3–511–20
Phi-4 (14B)14B6 بیت11.4 GB3–512–22
Gemma 4 12B Unified12B8 بیت12.7 GB4–611–19
Qwen3 8B8.2B8 بیت8.7 GB10–1716–28
Llama 3.1 8B Instruct8B8 بیت8.5 GB10–1816–29
Gemma 4 E2B5.1B8 بیت5.4 GB19–3358–102
Qwen3.5 4B4B8 بیت4.3 GB10–1932–57
Phi-4 mini instruct3.8B8 بیت4 GB11–2035–61
Llama 3.2 3B Instruct3.21B8 بیت3.4 GB13–2441–72
SmolLM3 3B3B8 بیت3.2 GB14–2543–77
LFM2.5 2.6B2.69B8 بیت2.9 GB16–2848–85
Qwen3.5 2B2B8 بیت2.1 GB21–3866–117
Llama 3.2 1B Instruct1.23B8 بیت1.3 GB35–62106–189
Qwen3.5 0.8B0.8B8 بیت0.9 GB50–89154–273
Qwen3 0.6B0.6B8 بیت0.6 GB75–133230–409
Qwen3.6 35B A3B35B · 3B فعال · هوش 18.23 بیت کیفیت پایین‌تر15.3 GB35–62106–189
Muse Glimmer 30B29.6B · هوش 17.53 بیت کیفیت پایین‌تر13 GB3–611–19
Gemma 4 31B30.7B · هوش 14.73 بیت کیفیت پایین‌تر13.4 GB3–610–18
Nemotron 3.5 Lightning 30B A3B30B · 3B فعال · هوش 12.93 بیت کیفیت پایین‌تر13.1 GB35–62106–189
Granite 4.2 30B30B · هوش 12.73 بیت کیفیت پایین‌تر13.1 GB3–611–19
Nemotron 3 Nano 30B A3B30B · 3.5B فعال · هوش 8.93 بیت کیفیت پایین‌تر13.1 GB30–5392–164
Qwen3 Coder 30B A3B Instruct30.5B · 3.3B فعال3 بیت کیفیت پایین‌تر13.3 GB32–5799–175
GLM-4.7 Flash30B · 3B فعال3 بیت کیفیت پایین‌تر13.1 GB35–62106–189

اجرا می‌شوند، اما کند 2

جا می‌شود، اما زیر 10 توکن در ثانیه: برای کارهای دسته‌ای خوب است، برای گفت‌وگو کند.

مدلنسخهحافظهM3M5 Pro
Qwen3.8 27B27B · هوش 33.74 بیت15.2 GB3–59–16
Qwen3.6 27B27B4 بیت15.2 GB3–59–16

خیلی بزرگ 35

حتی در 2 بیت، بیش از 24 GB حافظه لازم دارد.

پرسش‌ها

بهترین LLM برای Mac با 24 GB کدام است؟
از میان مدل‌هایی که Intelligence Index منتشرشده دارند، MiniCPM5 2B بالاترین امتیاز را در بین مدل‌هایی دارد که در 24 GB خوب اجرا می‌شوند (8 بیت). بزرگ‌ترین مدلی که خوب اجرا می‌شود Gemma 4 26B A4B است. برای کدنویسی: Devstral Small 2 (24B).
آیا 24 GB برای هوش مصنوعی محلی روی Mac کافی است؟
28 از 73 مدل باز اینجا در 4 بیت یا بهتر در آن خوب اجرا می‌شوند. macOS به‌طور پیش‌فرض اجازه می‌دهد GPU حدود 18 GB از آن را استفاده کند؛ مدل و کانتکستش باید در همین مقدار جا شوند.
آیا Mac با 24 GB می‌تواند gpt-oss-20b را اجرا کند؟
بله، 4.25 بیت اصلی، با حدود 24–42 توکن در ثانیه روی یک M3 و 73–129 روی یک M5 Pro.

اندازه‌های دیگر: 8 GB · 16 GB · 18 GB · 24 GB · 32 GB · 36 GB · 48 GB · 64 GB · 96 GB · 128 GB · 192 GB · 256 GB · 512 GB

آن‌ها را با MLX Harness (رایگان و متن‌باز) یا mlx-lm از Apple در Terminal اجرا کنید: گام به گام.

چطور محاسبه شده

حافظه: پارامترهای مدل در 8، 6، 4، 3 یا 2 بیت برای هر وزن به‌علاوهٔ مقیاس‌های گروهی MLX (نیم بیت برای هر وزن)، یا قالب اصلی آن، به‌اضافهٔ جا برای کانتکست. macOS به‌طور پیش‌فرض اجازه می‌دهد GPU حدود 75% حافظهٔ یکپارچه را استفاده کند. سرعت: پهنای باند حافظه تقسیم بر بایت‌هایی که برای هر توکن خوانده می‌شود، سقف سرعت یک گفت‌وگوست؛ در بنچمارک‌های عمومی llama.cpp روی Apple Silicon اجراهای واقعی به حدود 45% تا 80% آن می‌رسند و همین بازه نمایش داده می‌شود. این‌ها برآوردند، نه اندازه‌گیری: Mac خودتان را روی MLX Bench بسنجید. ارقام مدل‌ها از کارت رسمی هر مدل و ارقام تراشه‌ها از مشخصات فنی Apple است. بررسی‌شده در 2026-10-19. همان داده‌های mlx.app/compare.

بهترین LLMهای محلی برای Mac با 24 GB (M2 تا M6): چه اجرا می‌شود