เข้าสู่ระบบสร้างวอลเล็ต

Mac รัน Nemotron 3 Super 120B A12B ได้ไหม

ได้ หากมีหน่วยความจำแบบรวม 128 GB ขึ้นไป Nemotron 3 Super 120B A12B มีพารามิเตอร์ 120B โดยใช้งานจริง 12B ต่อโทเค็น ด้านล่างคือหน่วยความจำที่ต้องใช้ในแต่ละความแม่นยำ และความเร็วที่ชิป Apple แต่ละรุ่นรันได้

หน่วยความจำที่ 4 บิต72.9 GBค่าน้ำหนัก 67.5 GB + บริบท
Mac ขั้นต่ำ128 GB4 บิต · 23 ตัวเลือก Mac
Mac ที่เร็วที่สุด53–94โทเค็น/วินาที · M2 Ultra 128 GB (ค่าประมาณ)

หน่วยความจำในแต่ละความแม่นยำ

เวอร์ชันค่าน้ำหนักรวมบริบทMac ขั้นต่ำ
8 บิต128 GB138 GB192 GB
6 บิต97.5 GB105 GB192 GB
4 บิต67.5 GB72.9 GB128 GB
3 บิต คุณภาพต่ำลง52.5 GB56.7 GB96 GB
2 บิต คุณภาพต่ำลง37.5 GB40.5 GB64 GB

บนชิป Apple ทุกรุ่น

ขนาดหน่วยความจำเล็กที่สุดของแต่ละชิปที่รัน Nemotron 3 Super 120B A12B ได้ เวอร์ชันที่ดีที่สุดที่ใส่ได้ และความเร็วในการเขียนที่คาดได้

ชิปต้องใช้เวอร์ชันโทเค็น/วินาที
M6ไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–
M5 Ultra256 GB8 บิต รันได้ดี42–75
M5 Max128 GB4 บิต รันได้ดี41–72
M5 Pro64 GB2 บิต รันได้ดี36–65
M5ไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–
M4 Max128 GB4 บิต รันได้ดี36–64
M4 Pro64 GB2 บิต รันได้ดี32–57
M4ไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–
M3 Ultra256 GB8 บิต รันได้ดี29–51
M3 Max128 GB4 บิต รันได้ดี26–47
M3 Proไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–
M3ไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–
M2 Ultra128 GB4 บิต รันได้ดี53–94
M2 Max64 GB2 บิต รันได้ดี47–84
M2 Proไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–
M2ไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–
M1 Ultra128 GB4 บิต รันได้ดี53–94
M1 Max64 GB2 บิต รันได้ดี47–84
M1 Proไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–
M1ไม่มีขนาดที่ใส่ได้ใหญ่เกินไป–

วิธีรัน

  1. วิธีที่ง่ายที่สุด: ดาวน์โหลด MLX Harness ฟรีและโอเพนซอร์ส ค้นหา Nemotron 3 Super 120B A12B ดาวน์โหลดเวอร์ชันที่เหมาะกับ Mac ของคุณ แล้วเริ่มแชตได้เลย แอปยังให้บริการโมเดลแก่แอปอื่นๆ ของคุณผ่าน API ที่เข้ากันได้กับ OpenAI ด้วยดาวน์โหลด MLX Harnessฟรี · Apple Silicon · macOS 14.5 ขึ้นไป
  2. ในเทอร์มินัล ด้วย MLX ของ Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/NVIDIA-Nemotron-3-Super-120B-A12B-4bitบิลด์: mlx-community/NVIDIA-Nemotron-3-Super-120B-A12B-4bit บน Hugging Face ความแม่นยำอื่นๆ อยู่ถัดไป

ทีละขั้นตอน: ดาวน์โหลดและรัน LLM บน Mac · วิธีใช้ MLX Harness · MLX vs Ollama vs llama.cpp

เกี่ยวกับ Nemotron 3 Super 120B A12B

ผู้พัฒนาNVIDIA
พารามิเตอร์ทั้งหมด 120B · ใช้งาน 12B (mixture-of-experts)
บริบท256K โทเค็น
สัญญาอนุญาตNVIDIA Nemotron Open Model License
เปิดตัว2026-03
อินพุตข้อความ
ค่าน้ำหนักnvidia/NVIDIA-Nemotron-3-Super-120B-A12B-BF16

คำถาม

Nemotron 3 Super 120B A12B ต้องใช้หน่วยความจำเท่าไร
ค่าน้ำหนักราว 67.5 GB ที่ 4 บิต บวกที่สำหรับบริบท รวมทั้งหมด 72.9 GB บน Mac หมายถึงต้องมีหน่วยความจำแบบรวม 128 GB ขึ้นไป เพราะโดยค่าเริ่มต้น macOS ให้ GPU ใช้ได้ราว 75%
Nemotron 3 Super 120B A12B เร็วแค่ไหนบน Mac
ความเร็วในการเขียนขึ้นอยู่กับแบนด์วิดท์หน่วยความจำ Mac ที่เร็วที่สุดสำหรับโมเดลนี้คือ M2 Ultra ที่มี 128 GB ได้ราว 53–94 โทเค็นต่อวินาที (4 บิต) ส่วน Mac ขั้นต่ำที่รันได้ คือ M2 Ultra ที่มี 128 GB ได้ราว 53–94
ทำไม Nemotron 3 Super 120B A12B จึงรันได้เร็วกว่าขนาดของมัน
เพราะเป็นโมเดลแบบ mixture-of-experts ซึ่งเก็บพารามิเตอร์ 120B ไว้ในหน่วยความจำ แต่อ่านเพียง 12B ต่อโทเค็น จึงเขียนได้เร็วเท่าโมเดลที่เล็กกว่ามาก

โมเดลที่คล้ายกัน

ทุกโมเดล · Mac ทุกรุ่น · เปรียบเทียบ Mac ของคุณ

สำหรับการ์ดโมเดลหรือ README ของคุณ

Runs on a Mac: Nemotron 3 Super 120B A12B แสดง Mac ขั้นต่ำที่รัน Nemotron 3 Super 120B A12B ได้ดี และลิงก์มาที่หน้านี้

[![Runs on a Mac](https://mlx.app/badge/run/nemotron-3-super-120b-a12b.svg)](https://mlx.app/run/nemotron-3-super-120b-a12b)

วิธีคำนวณ

หน่วยความจำ: พารามิเตอร์ของโมเดลที่ 8, 6, 4, 3 หรือ 2 บิตต่อค่าน้ำหนัก บวกสเกลแบบกลุ่มของ MLX (ครึ่งบิตต่อค่าน้ำหนัก) หรือตามรูปแบบเนทีฟของโมเดล แล้วเผื่อที่สำหรับบริบท โดยค่าเริ่มต้น macOS ให้ GPU ใช้หน่วยความจำแบบรวมได้ราว 75% ความเร็ว: แบนด์วิดท์หน่วยความจำหารด้วยจำนวนไบต์ที่อ่านต่อโทเค็น คือเพดานสำหรับหนึ่งบทสนทนา ในผลทดสอบ Apple Silicon แบบสาธารณะของ llama.cpp การรันจริงทำได้ราว 45% ถึง 80% ของเพดานนี้ ซึ่งเป็นช่วงที่แสดงไว้ ตัวเลขเหล่านี้เป็นค่าประมาณ ไม่ใช่ค่าที่วัดจริง วัด Mac ของคุณเองได้ที่ MLX Bench ตัวเลขโมเดลมาจากการ์ดโมเดลทางการของแต่ละโมเดล ตัวเลขชิปมาจากข้อมูลจำเพาะทางเทคนิคของ Apple ตรวจสอบเมื่อ 2026-10-19 ใช้ข้อมูลเดียวกับ mlx.app/compare

Mac รัน Nemotron 3 Super 120B A12B ได้ไหม หน่วยความจำและความเร็ว