เข้าสู่ระบบสร้างวอลเล็ต

Mac รัน Granite 4.2 30B ได้ไหม

ได้ หากมีหน่วยความจำแบบรวม 32 GB ขึ้นไป Granite 4.2 30B มีพารามิเตอร์ 30B ด้านล่างคือหน่วยความจำที่ต้องใช้ในแต่ละความแม่นยำ และความเร็วที่ชิป Apple แต่ละรุ่นรันได้

หน่วยความจำที่ 4 บิต18.4 GBค่าน้ำหนัก 16.9 GB + บริบท
Mac ขั้นต่ำ32 GB4 บิต · 55 ตัวเลือก Mac
Mac ที่เร็วที่สุด17–30โทเค็น/วินาที · M5 Ultra 96 GB (ค่าประมาณ)

หน่วยความจำในแต่ละความแม่นยำ

เวอร์ชันค่าน้ำหนักรวมบริบทMac ขั้นต่ำ
8 บิต31.9 GB34.5 GB48 GB
6 บิต24.4 GB26.4 GB36 GB
4 บิต16.9 GB18.4 GB32 GB
3 บิต คุณภาพต่ำลง13.1 GB14.6 GB24 GB
2 บิต คุณภาพต่ำลง9.4 GB10.9 GB16 GB

บนชิป Apple ทุกรุ่น

ขนาดหน่วยความจำเล็กที่สุดของแต่ละชิปที่รัน Granite 4.2 30B ได้ เวอร์ชันที่ดีที่สุดที่ใส่ได้ และความเร็วในการเขียนที่คาดได้

ชิปต้องใช้เวอร์ชันโทเค็น/วินาที
M632 GB4 บิต ช้า5–8
M5 Ultra96 GB8 บิต รันได้ดี17–30
M5 Max36 GB4 บิต รันได้ดี12–22
M5 Pro48 GB8 บิต ช้า4–8
M532 GB4 บิต ช้า4–7
M4 Max36 GB4 บิต รันได้ดี11–19
M4 Pro48 GB8 บิต ช้า4–7
M432 GB4 บิต ช้า3–6
M3 Ultra96 GB8 บิต รันได้ดี12–21
M3 Max36 GB6 บิต ช้า6–10
M3 Pro36 GB6 บิต ช้า3–5
M316 GB2 บิต ช้า5–9
M2 Ultra64 GB8 บิต รันได้ดี11–20
M2 Max32 GB4 บิต รันได้ดี11–19
M2 Pro32 GB4 บิต ช้า5–9
M216 GB2 บิต ช้า5–9
M1 Ultra64 GB8 บิต รันได้ดี11–20
M1 Max32 GB4 บิต รันได้ดี11–19
M1 Pro32 GB4 บิต ช้า5–9
M116 GB2 บิต ช้า3–6

วิธีรัน

  1. วิธีที่ง่ายที่สุด: ดาวน์โหลด MLX Harness ฟรีและโอเพนซอร์ส ค้นหา Granite 4.2 30B ดาวน์โหลดเวอร์ชันที่เหมาะกับ Mac ของคุณ แล้วเริ่มแชตได้เลย แอปยังให้บริการโมเดลแก่แอปอื่นๆ ของคุณผ่าน API ที่เข้ากันได้กับ OpenAI ด้วยดาวน์โหลด MLX Harnessฟรี · Apple Silicon · macOS 14.5 ขึ้นไป
  2. ในเทอร์มินัล ด้วย MLX ของ Apple: ยังไม่มีบิลด์ MLX จากชุมชน จึงต้องสร้างเองจากค่าน้ำหนักทางการ:pip install mlx-lmmlx_lm.convert --hf-path ibm-granite/granite-4.2-30b -q

ทีละขั้นตอน: ดาวน์โหลดและรัน LLM บน Mac · วิธีใช้ MLX Harness · MLX vs Ollama vs llama.cpp

เกี่ยวกับ Granite 4.2 30B

ผู้พัฒนาIBM
พารามิเตอร์30B (dense)
บริบท128K โทเค็น
สัญญาอนุญาตApache-2.0
เปิดตัว2026-08
อินพุตข้อความ
ความฉลาด12.7 บน Artificial Analysis Intelligence Index
ค่าน้ำหนักibm-granite/granite-4.2-30b

คำถาม

Granite 4.2 30B ต้องใช้หน่วยความจำเท่าไร
ค่าน้ำหนักราว 16.9 GB ที่ 4 บิต บวกที่สำหรับบริบท รวมทั้งหมด 18.4 GB บน Mac หมายถึงต้องมีหน่วยความจำแบบรวม 32 GB ขึ้นไป เพราะโดยค่าเริ่มต้น macOS ให้ GPU ใช้ได้ราว 75%
Granite 4.2 30B เร็วแค่ไหนบน Mac
ความเร็วในการเขียนขึ้นอยู่กับแบนด์วิดท์หน่วยความจำ Mac ที่เร็วที่สุดสำหรับโมเดลนี้คือ M5 Ultra ที่มี 96 GB ได้ราว 17–30 โทเค็นต่อวินาที (8 บิต) ส่วน Mac ขั้นต่ำที่รันได้ คือ M2 Max ที่มี 32 GB ได้ราว 11–19
การควอนไทซ์ทำให้ Granite 4.2 30B แย่ลงไหม
ที่ 4 บิต โมเดลส่วนใหญ่ยังมีคุณภาพใกล้เคียงต้นฉบับ ต่ำกว่า 4 บิตคุณภาพจะลดลงเร็วขึ้น เลือกความแม่นยำสูงสุดที่ใส่ใน Mac ของคุณได้โดยยังมีที่เหลือ

โมเดลที่คล้ายกัน

ทุกโมเดล · Mac ทุกรุ่น · เปรียบเทียบ Mac ของคุณ

สำหรับการ์ดโมเดลหรือ README ของคุณ

Runs on a Mac: Granite 4.2 30B แสดง Mac ขั้นต่ำที่รัน Granite 4.2 30B ได้ดี และลิงก์มาที่หน้านี้

[![Runs on a Mac](https://mlx.app/badge/run/granite-4.2-30b.svg)](https://mlx.app/run/granite-4.2-30b)

วิธีคำนวณ

หน่วยความจำ: พารามิเตอร์ของโมเดลที่ 8, 6, 4, 3 หรือ 2 บิตต่อค่าน้ำหนัก บวกสเกลแบบกลุ่มของ MLX (ครึ่งบิตต่อค่าน้ำหนัก) หรือตามรูปแบบเนทีฟของโมเดล แล้วเผื่อที่สำหรับบริบท โดยค่าเริ่มต้น macOS ให้ GPU ใช้หน่วยความจำแบบรวมได้ราว 75% ความเร็ว: แบนด์วิดท์หน่วยความจำหารด้วยจำนวนไบต์ที่อ่านต่อโทเค็น คือเพดานสำหรับหนึ่งบทสนทนา ในผลทดสอบ Apple Silicon แบบสาธารณะของ llama.cpp การรันจริงทำได้ราว 45% ถึง 80% ของเพดานนี้ ซึ่งเป็นช่วงที่แสดงไว้ ตัวเลขเหล่านี้เป็นค่าประมาณ ไม่ใช่ค่าที่วัดจริง วัด Mac ของคุณเองได้ที่ MLX Bench ตัวเลขโมเดลมาจากการ์ดโมเดลทางการของแต่ละโมเดล ตัวเลขชิปมาจากข้อมูลจำเพาะทางเทคนิคของ Apple ตรวจสอบเมื่อ 2026-10-19 ใช้ข้อมูลเดียวกับ mlx.app/compare

Mac รัน Granite 4.2 30B ได้ไหม หน่วยความจำและความเร็ว