MasukBuat dompet

MacBook Pro dengan M5 Pro untuk AI lokal.

M5 Pro membaca memori pada 307 GB/s, yang menentukan kecepatan menulisnya. Memori menentukan model mana yang muat, dan tidak bisa ditambah nanti, jadi pilih ukurannya di sini.

24 GB28 model berjalan baikGemma 4 26B A4B · 66–117 tok/s48 GB33 model berjalan baikQwen3.6 35B A3B · 58–102 tok/s64 GB34 model berjalan baikNemotron 3.5 Bolt 74B A9B · 27–48 tok/s

Menurut ukuran memori

MemoriBerjalan baikTerbesar yang berjalan baikgpt-oss-20b
24 GB307 GB/s28Gemma 4 26B A4B73–129 tok/s
48 GB307 GB/s33Qwen3.6 35B A3B73–129 tok/s
64 GB307 GB/s34Nemotron 3.5 Bolt 74B A9B73–129 tok/s

Model: MacBook Pro (14-inch, M5 Pro or M5 Max), MacBook Pro (16-inch, M5 Pro or M5 Max). Tidak setiap ukuran memori tersedia untuk setiap model; Spesifikasi Teknis Apple mencantumkan pilihan untuk masing-masing.

Pertanyaan

Apakah MacBook Pro dengan M5 Pro bagus untuk LLM lokal?
Dengan 64 GB, ia menjalankan 34 dari 73 model terbuka dengan baik, hingga Nemotron 3.5 Bolt 74B A9B, dan menulis sekitar 73–129 token per detik dengan gpt-oss-20b. M5 Pro membaca memori pada 307 GB/s, yang menentukan kecepatan menulisnya.
Berapa memori yang sebaiknya dimiliki MacBook Pro dengan M5 Pro untuk AI?
Dengan 24 GB, 28 model terbuka berjalan baik; dengan 64 GB, 34, hingga Nemotron 3.5 Bolt 74B A9B. Memori menentukan model mana yang muat, dan tidak bisa ditambah nanti.

Mac lain

MacBook Pro dengan chip lain:

Mac lain dengan M5 Pro:

Adu langsung:

M5 Pro untuk AI lokal · Mac terbaik untuk LLM lokal · Semua Mac

Cara menghitungnya

Memori: parameter model pada 8, 6, 4, 3, atau 2 bit per bobot ditambah skala grup MLX (setengah bit per bobot), atau format bawaannya, ditambah ruang untuk konteks. Secara bawaan macOS mengizinkan GPU memakai sekitar 75% memori terpadu. Kecepatan: bandwidth memori dibagi jumlah byte yang dibaca per token adalah batas atas untuk satu percakapan; dalam benchmark Apple Silicon publik llama.cpp, proses nyata mencapai sekitar 45% hingga 80% darinya, dan rentang itulah yang ditampilkan. Ini perkiraan, bukan pengukuran: ukur Mac Anda sendiri di MLX Bench. Angka model dari kartu model resmi masing-masing, angka chip dari Spesifikasi Teknis Apple. Diperiksa 2026-10-19. Data sama dengan mlx.app/compare.

MacBook Pro M5 Pro untuk AI lokal: LLM yang jalan per memori