LLM ที่ดีที่สุดสำหรับ Mac 24 GB

โมเดลแบบเปิด 28 จาก 73 โมเดลรันได้ดีใน 24 GB โดยค่าเริ่มต้น GPU ใช้ได้ราว 18 GB ความเร็วขึ้นอยู่กับชิป ตั้งแต่ 100 GB/s บน M3 ถึง 307 GB/s บน M5 Pro

ฉลาดที่สุดที่รันได้ดีMiniCPM5 2B8 บิต · 2.7 GB · 17–91 tok/sใหญ่ที่สุดที่รันได้ดีGemma 4 26B A4B4 บิต · 14.2 GB · 21–117 tok/sสำหรับเขียนโค้ดDevstral Small 2 (24B)4 บิต · 13.5 GB · 3–18 tok/s

Mac ที่มี 24 GB

มีชิป 7 รุ่นจาก M2 ถึง M6 ที่มาพร้อม 24 GB เปิดแต่ละรุ่นเพื่อดูรายการและความเร็วของรุ่นนั้น

รันได้ดี 36

ใส่ได้และยังเหลือที่สำหรับบริบท ได้ 10 โทเค็นต่อวินาทีขึ้นไปบน M5 Pro

โมเดลเวอร์ชันหน่วยความจำM3M5 Pro
MiniCPM5 2B2.52B · ความฉลาด 12.58 บิต2.7 GB17–3051–91
Qwen3.5 9B9B · ความฉลาด 11.28 บิต9.6 GB5–814–26
Granite 4.2 8B8B · ความฉลาด 11.18 บิต8.5 GB10–1816–29
Granite 4.2 3B3B · ความฉลาด 9.18 บิต3.2 GB14–2543–77
gpt-oss-20b21B · ใช้งาน 3.6B · ความฉลาด 94.25 บิตแบบเนทีฟ13.8 GB24–4273–129
Gemma 4 E4B8B · ความฉลาด 8.98 บิต8.5 GB12–2229–51
Ministral 3 8B8.9B · ความฉลาด 5.58 บิต9.5 GB5–815–26
Nemotron 3 Nano 4B3.97B · ความฉลาด 4.88 บิต4.2 GB11–1933–58
Gemma 4 26B A4B25.2B · ใช้งาน 3.8B4 บิต14.2 GB21–3866–117
Devstral Small 2 (24B)24B4 บิต13.5 GB3–610–18
Magistral Small 1.2 (2509)24B4 บิต13.5 GB3–610–18
Mistral Small 3.2 (24B)24B4 บิต13.5 GB3–610–18
LFM2.5 24B A2B24B · ใช้งาน 2B4 บิต13.5 GB41–73126–223
Phi-4 Reasoning Vision 15B15B6 บิต12.2 GB3–511–20
Phi-4 (14B)14B6 บิต11.4 GB3–512–22
Gemma 4 12B Unified12B8 บิต12.7 GB4–611–19
Qwen3 8B8.2B8 บิต8.7 GB10–1716–28
Llama 3.1 8B Instruct8B8 บิต8.5 GB10–1816–29
Gemma 4 E2B5.1B8 บิต5.4 GB19–3358–102
Qwen3.5 4B4B8 บิต4.3 GB10–1932–57
Phi-4 mini instruct3.8B8 บิต4 GB11–2035–61
Llama 3.2 3B Instruct3.21B8 บิต3.4 GB13–2441–72
SmolLM3 3B3B8 บิต3.2 GB14–2543–77
LFM2.5 2.6B2.69B8 บิต2.9 GB16–2848–85
Qwen3.5 2B2B8 บิต2.1 GB21–3866–117
Llama 3.2 1B Instruct1.23B8 บิต1.3 GB35–62106–189
Qwen3.5 0.8B0.8B8 บิต0.9 GB50–89154–273
Qwen3 0.6B0.6B8 บิต0.6 GB75–133230–409
Qwen3.6 35B A3B35B · ใช้งาน 3B · ความฉลาด 18.23 บิต คุณภาพต่ำลง15.3 GB35–62106–189
Muse Glimmer 30B29.6B · ความฉลาด 17.53 บิต คุณภาพต่ำลง13 GB3–611–19
Gemma 4 31B30.7B · ความฉลาด 14.73 บิต คุณภาพต่ำลง13.4 GB3–610–18
Nemotron 3.5 Lightning 30B A3B30B · ใช้งาน 3B · ความฉลาด 12.93 บิต คุณภาพต่ำลง13.1 GB35–62106–189
Granite 4.2 30B30B · ความฉลาด 12.73 บิต คุณภาพต่ำลง13.1 GB3–611–19
Nemotron 3 Nano 30B A3B30B · ใช้งาน 3.5B · ความฉลาด 8.93 บิต คุณภาพต่ำลง13.1 GB30–5392–164
Qwen3 Coder 30B A3B Instruct30.5B · ใช้งาน 3.3B3 บิต คุณภาพต่ำลง13.3 GB32–5799–175
GLM-4.7 Flash30B · ใช้งาน 3B3 บิต คุณภาพต่ำลง13.1 GB35–62106–189

รันได้ แต่ช้า 2

ใส่ได้ แต่ต่ำกว่า 10 โทเค็นต่อวินาที เหมาะกับงานแบบแบตช์ แต่ช้าสำหรับการแชต

โมเดลเวอร์ชันหน่วยความจำM3M5 Pro
Qwen3.8 27B27B · ความฉลาด 33.74 บิต15.2 GB3–59–16
Qwen3.6 27B27B4 บิต15.2 GB3–59–16

ใหญ่เกินไป 35

ต้องใช้หน่วยความจำมากกว่า 24 GB แม้ที่ 2 บิต

คำถาม

LLM ที่ดีที่สุดสำหรับ Mac ที่มี 24 GB คืออะไร
ในบรรดาโมเดลที่มีคะแนน Intelligence Index เผยแพร่ MiniCPM5 2B ได้คะแนนสูงสุดในกลุ่มที่รันได้ดีใน 24 GB (8 บิต) โมเดลใหญ่ที่สุดที่รันได้ดีคือ Gemma 4 26B A4B สำหรับเขียนโค้ด: Devstral Small 2 (24B)
24 GB พอสำหรับ AI บนเครื่องบน Mac ไหม
โมเดลแบบเปิด 28 จาก 73 โมเดลที่นี่รันได้ดีในขนาดนี้ที่ 4 บิตหรือดีกว่า โดยค่าเริ่มต้น macOS ให้ GPU ใช้ได้ราว 18 GB และโมเดลกับบริบทต้องใส่ได้ในส่วนนั้น
Mac 24 GB รัน gpt-oss-20b ได้ไหม
ได้ ที่ 4.25 บิตแบบเนทีฟ ราว 24–42 โทเค็นต่อวินาทีบน M3 และ 73–129 บน M5 Pro

ขนาดอื่น: 8 GB · 16 GB · 18 GB · 24 GB · 32 GB · 36 GB · 48 GB · 64 GB · 96 GB · 128 GB · 192 GB · 256 GB · 512 GB

รันด้วย MLX Harness (ฟรี โอเพนซอร์ส) หรือ mlx-lm ของ Apple ในเทอร์มินัล: ทีละขั้นตอน

วิธีคำนวณ

หน่วยความจำ: พารามิเตอร์ของโมเดลที่ 8, 6, 4, 3 หรือ 2 บิตต่อค่าน้ำหนัก บวกสเกลแบบกลุ่มของ MLX (ครึ่งบิตต่อค่าน้ำหนัก) หรือตามรูปแบบเนทีฟของโมเดล แล้วเผื่อที่สำหรับบริบท โดยค่าเริ่มต้น macOS ให้ GPU ใช้หน่วยความจำแบบรวมได้ราว 75% ความเร็ว: แบนด์วิดท์หน่วยความจำหารด้วยจำนวนไบต์ที่อ่านต่อโทเค็น คือเพดานสำหรับหนึ่งบทสนทนา ในผลทดสอบ Apple Silicon แบบสาธารณะของ llama.cpp การรันจริงทำได้ราว 45% ถึง 80% ของเพดานนี้ ซึ่งเป็นช่วงที่แสดงไว้ ตัวเลขเหล่านี้เป็นค่าประมาณ ไม่ใช่ค่าที่วัดจริง วัด Mac ของคุณเองได้ที่ MLX Bench ตัวเลขโมเดลมาจากการ์ดโมเดลทางการของแต่ละโมเดล ตัวเลขชิปมาจากข้อมูลจำเพาะทางเทคนิคของ Apple ตรวจสอบเมื่อ 2026-10-19 ใช้ข้อมูลเดียวกับ mlx.app/compare

LLM บนเครื่องที่ดีที่สุดสำหรับ Mac 24 GB (M2 ถึง M6): รันอะไรได้