Mac có chạy được Llama 4 Maverick 17B-128E Instruct không?

Có, với 512 GB bộ nhớ hợp nhất trở lên. Llama 4 Maverick 17B-128E Instruct có 400B tham số, mỗi token chỉ dùng 17B trong số đó; dưới đây là bộ nhớ cần ở từng mức chính xác và tốc độ của mọi chip Apple khi chạy nó.

Bộ nhớ ở mức 4-bit243 GBtrọng số 225 GB + ngữ cảnh
Mac nhỏ nhất512 GB6-bit · 5 cấu hình Mac
Mac nhanh nhất39–70token/giây · M5 Ultra 512 GB (ước tính)

Bộ nhớ ở từng mức chính xác

Phiên bảnTrọng sốKèm ngữ cảnhMac nhỏ nhất
8-bit425 GB459 GBhơn mọi Mac
6-bit325 GB351 GB512 GB
4-bit225 GB243 GB512 GB
3-bit chất lượng thấp hơn175 GB189 GB256 GB
2-bit chất lượng thấp hơn125 GB135 GB192 GB

Trên mọi chip Apple

Dung lượng bộ nhớ nhỏ nhất của mỗi chip chạy được Llama 4 Maverick 17B-128E Instruct, phiên bản tốt nhất vừa với nó, và tốc độ viết bạn có thể kỳ vọng.

ChipCầnPhiên bảnToken/giây
M6không dung lượng nào vừaQuá lớn–
M5 Ultra512 GB6-bit Chạy tốt39–70
M5 Maxkhông dung lượng nào vừaQuá lớn–
M5 Prokhông dung lượng nào vừaQuá lớn–
M5không dung lượng nào vừaQuá lớn–
M4 Maxkhông dung lượng nào vừaQuá lớn–
M4 Prokhông dung lượng nào vừaQuá lớn–
M4không dung lượng nào vừaQuá lớn–
M3 Ultra512 GB6-bit Chạy tốt27–47
M3 Maxkhông dung lượng nào vừaQuá lớn–
M3 Prokhông dung lượng nào vừaQuá lớn–
M3không dung lượng nào vừaQuá lớn–
M2 Ultra192 GB2-bit Chạy tốt68–121
M2 Maxkhông dung lượng nào vừaQuá lớn–
M2 Prokhông dung lượng nào vừaQuá lớn–
M2không dung lượng nào vừaQuá lớn–
M1 Ultrakhông dung lượng nào vừaQuá lớn–
M1 Maxkhông dung lượng nào vừaQuá lớn–
M1 Prokhông dung lượng nào vừaQuá lớn–
M1không dung lượng nào vừaQuá lớn–

Cách chạy

  1. Cách dễ nhất: tải MLX Harness, miễn phí và mã nguồn mở. Tìm Llama 4 Maverick 17B-128E Instruct, tải phiên bản vừa với Mac của bạn và bắt đầu trò chuyện. Ứng dụng cũng cung cấp mô hình cho các ứng dụng khác qua API tương thích OpenAI.Tải MLX HarnessMiễn phí · Apple Silicon · macOS 14.5 trở lên
  2. Trong Terminal với MLX của Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bitBản dựng: mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bit trên Hugging Face. Các mức chính xác khác nằm ngay cạnh.

Từng bước: tải và chạy LLM trên Mac · cách dùng MLX Harness · MLX vs Ollama vs llama.cpp

Về Llama 4 Maverick 17B-128E Instruct

Nhà phát triểnMeta
Tham sốTổng 400B · 17B hoạt động (mixture-of-experts)
Ngữ cảnh1M token
Giấy phépLlama 4 Community License
Phát hành2025-04
Đầu vàoVăn bản và hình ảnh
Trí tuệ9,3 trên Artificial Analysis Intelligence Index
Trọng sốmeta-llama/Llama-4-Maverick-17B-128E-Instruct

Câu hỏi

Llama 4 Maverick 17B-128E Instruct cần bao nhiêu bộ nhớ?
Khoảng 225 GB cho trọng số ở mức 4-bit, cộng thêm chỗ cho ngữ cảnh: tổng cộng 243 GB. Trên Mac, điều đó có nghĩa là cần từ 512 GB bộ nhớ hợp nhất trở lên, vì mặc định macOS cho GPU dùng khoảng 75% bộ nhớ.
Llama 4 Maverick 17B-128E Instruct chạy nhanh đến đâu trên Mac?
Tốc độ viết phụ thuộc vào băng thông bộ nhớ. Mac nhanh nhất cho mô hình này ở đây là M5 Ultra với 512 GB, khoảng 39–70 token mỗi giây (6-bit). Mac nhỏ nhất chạy được nó, M5 Ultra với 512 GB, đạt khoảng 39–70.
Vì sao Llama 4 Maverick 17B-128E Instruct chạy nhanh hơn kích thước của nó?
Đây là mô hình mixture-of-experts: nó giữ 400B tham số trong bộ nhớ nhưng mỗi token chỉ đọc 17B, nên viết nhanh như một mô hình nhỏ hơn nhiều.

Mô hình tương tự

Mọi mô hình · Mọi Mac · So sánh Mac của bạn

Cho thẻ mô hình hoặc README của bạn

Runs on a Mac: Llama 4 Maverick 17B-128E Instruct Hiển thị chiếc Mac nhỏ nhất chạy tốt Llama 4 Maverick 17B-128E Instruct và liên kết tới trang này.

[![Runs on a Mac](https://mlx.app/badge/run/llama-4-maverick.svg)](https://mlx.app/run/llama-4-maverick)

Cách tính

Bộ nhớ: số tham số của mô hình ở 8, 6, 4, 3 hoặc 2 bit mỗi trọng số cộng với hệ số tỷ lệ theo nhóm của MLX (nửa bit mỗi trọng số), hoặc theo định dạng gốc, rồi thêm chỗ cho ngữ cảnh. Mặc định macOS cho GPU dùng khoảng 75% bộ nhớ hợp nhất. Tốc độ: băng thông bộ nhớ chia cho số byte đọc mỗi token là mức trần cho một cuộc trò chuyện; trong benchmark Apple Silicon công khai của llama.cpp, thực tế đạt khoảng 45% đến 80% mức đó, và đó là khoảng được hiển thị. Đây là ước tính, không phải số đo: hãy đo chính Mac của bạn trên MLX Bench. Số liệu mô hình lấy từ thẻ mô hình chính thức, số liệu chip từ Thông số kỹ thuật của Apple. Kiểm tra ngày 2026-10-19. Cùng dữ liệu với mlx.app/compare.

Mac chạy được Llama 4 Maverick 17B-128E Instruct không? Bộ nhớ, tốc độ