Bisakah Mac menjalankan Llama 4 Maverick 17B-128E Instruct?

Ya, dengan memori terpadu 512 GB atau lebih. Llama 4 Maverick 17B-128E Instruct punya 400B parameter, 17B di antaranya aktif untuk setiap token; berikut memori yang dibutuhkan di setiap presisi dan seberapa cepat setiap chip Apple menjalankannya.

Memori pada 4-bit243 GBbobot 225 GB + konteks
Mac terkecil512 GB6-bit · 5 konfigurasi Mac
Mac tercepat39–70token/s · M5 Ultra 512 GB (perkiraan)

Memori di setiap presisi

VersiBobotDengan konteksMac terkecil
8-bit425 GB459 GBmelebihi Mac mana pun
6-bit325 GB351 GB512 GB
4-bit225 GB243 GB512 GB
3-bit kualitas lebih rendah175 GB189 GB256 GB
2-bit kualitas lebih rendah125 GB135 GB192 GB

Di setiap chip Apple

Ukuran memori terkecil setiap chip yang bisa menjalankan Llama 4 Maverick 17B-128E Instruct, versi terbaik yang muat, dan kecepatan menulis yang bisa Anda harapkan.

ChipButuhVersiToken/s
M6tidak ada ukuran yang muatTerlalu besar–
M5 Ultra512 GB6-bit Berjalan baik39–70
M5 Maxtidak ada ukuran yang muatTerlalu besar–
M5 Protidak ada ukuran yang muatTerlalu besar–
M5tidak ada ukuran yang muatTerlalu besar–
M4 Maxtidak ada ukuran yang muatTerlalu besar–
M4 Protidak ada ukuran yang muatTerlalu besar–
M4tidak ada ukuran yang muatTerlalu besar–
M3 Ultra512 GB6-bit Berjalan baik27–47
M3 Maxtidak ada ukuran yang muatTerlalu besar–
M3 Protidak ada ukuran yang muatTerlalu besar–
M3tidak ada ukuran yang muatTerlalu besar–
M2 Ultra192 GB2-bit Berjalan baik68–121
M2 Maxtidak ada ukuran yang muatTerlalu besar–
M2 Protidak ada ukuran yang muatTerlalu besar–
M2tidak ada ukuran yang muatTerlalu besar–
M1 Ultratidak ada ukuran yang muatTerlalu besar–
M1 Maxtidak ada ukuran yang muatTerlalu besar–
M1 Protidak ada ukuran yang muatTerlalu besar–
M1tidak ada ukuran yang muatTerlalu besar–

Cara menjalankannya

  1. Cara mudah: unduh MLX Harness, gratis dan open source. Cari Llama 4 Maverick 17B-128E Instruct, unduh versi yang cocok untuk Mac Anda, lalu mulai chat. Aplikasi ini juga menyajikan model ke aplikasi Anda yang lain melalui API yang kompatibel dengan OpenAI.Unduh MLX HarnessGratis · Apple Silicon · macOS 14.5 atau lebih baru
  2. Di Terminal dengan MLX dari Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bitBuild: mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bit di Hugging Face. Presisi lain ada di sebelahnya.

Langkah demi langkah: unduh dan jalankan LLM di Mac · cara memakai MLX Harness · MLX vs Ollama vs llama.cpp

Tentang Llama 4 Maverick 17B-128E Instruct

Dibuat olehMeta
Parameter400B total · 17B aktif (mixture of experts)
Konteks1M token
LisensiLlama 4 Community License
Dirilis2025-04
InputTeks dan gambar
Kecerdasan9,3 di Artificial Analysis Intelligence Index
Bobotmeta-llama/Llama-4-Maverick-17B-128E-Instruct

Pertanyaan

Berapa memori yang dibutuhkan Llama 4 Maverick 17B-128E Instruct?
Sekitar 225 GB untuk bobot pada 4-bit, ditambah ruang untuk konteks: total 243 GB. Di Mac artinya memori terpadu 512 GB atau lebih, karena secara bawaan macOS mengizinkan GPU memakai sekitar 75% darinya.
Seberapa cepat Llama 4 Maverick 17B-128E Instruct di Mac?
Kecepatan menulis bergantung pada bandwidth memori. Mac tercepat untuknya di sini adalah M5 Ultra dengan 512 GB, sekitar 39–70 token per detik (6-bit). Mac terkecil yang bisa menjalankannya, dengan 512 GB, mencapai sekitar 39–70 pada M5 Ultra.
Mengapa Llama 4 Maverick 17B-128E Instruct berjalan lebih cepat daripada ukurannya?
Ini model mixture-of-experts: ia menyimpan 400B parameter di memori tetapi hanya membaca 17B untuk setiap token, sehingga menulis secepat model yang jauh lebih kecil.

Model serupa

Semua model · Semua Mac · Bandingkan Mac Anda

Untuk kartu model atau README Anda

Runs on a Mac: Llama 4 Maverick 17B-128E Instruct Menampilkan Mac terkecil yang menjalankan Llama 4 Maverick 17B-128E Instruct dengan baik dan menautkan ke sini.

[![Runs on a Mac](https://mlx.app/badge/run/llama-4-maverick.svg)](https://mlx.app/run/llama-4-maverick)

Cara menghitungnya

Memori: parameter model pada 8, 6, 4, 3, atau 2 bit per bobot ditambah skala grup MLX (setengah bit per bobot), atau format bawaannya, ditambah ruang untuk konteks. Secara bawaan macOS mengizinkan GPU memakai sekitar 75% memori terpadu. Kecepatan: bandwidth memori dibagi jumlah byte yang dibaca per token adalah batas atas untuk satu percakapan; dalam benchmark Apple Silicon publik llama.cpp, proses nyata mencapai sekitar 45% hingga 80% darinya, dan rentang itulah yang ditampilkan. Ini perkiraan, bukan pengukuran: ukur Mac Anda sendiri di MLX Bench. Angka model dari kartu model resmi masing-masing, angka chip dari Spesifikasi Teknis Apple. Diperiksa 2026-10-19. Data sama dengan mlx.app/compare.

Bisakah Mac menjalankan Llama 4 Maverick 17B-128E Instruct? RAM, kecepatan