Menurut ukuran memori
| Memori | Berjalan baik | Terbesar yang berjalan baik | gpt-oss-20b |
|---|---|---|---|
| 18 GB150 GB/s | 20 | Gemma 4 12B Unified | 36–63 tok/s |
| 36 GB150 GB/s | 28 | Qwen3.6 35B A3B | 36–63 tok/s |
Model: MacBook Pro (14-inch, M3 Pro or M3 Max, Nov 2023), MacBook Pro (16-inch, Nov 2023). Tidak setiap ukuran memori tersedia untuk setiap model; Spesifikasi Teknis Apple mencantumkan pilihan untuk masing-masing.
Pertanyaan
- Apakah MacBook Pro dengan M3 Pro bagus untuk LLM lokal?
- Dengan 36 GB, ia menjalankan 28 dari 73 model terbuka dengan baik, hingga Qwen3.6 35B A3B, dan menulis sekitar 36–63 token per detik dengan gpt-oss-20b. M3 Pro membaca memori pada 150 GB/s, yang menentukan kecepatan menulisnya.
- Berapa memori yang sebaiknya dimiliki MacBook Pro dengan M3 Pro untuk AI?
- Dengan 18 GB, 20 model terbuka berjalan baik; dengan 36 GB, 28, hingga Qwen3.6 35B A3B. Memori menentukan model mana yang muat, dan tidak bisa ditambah nanti.
Mac lain
MacBook Pro dengan chip lain:
- MacBook Pro M5
- MacBook Pro M5 Pro
- MacBook Pro M5 Max
- MacBook Pro M4
- MacBook Pro M4 Pro
- MacBook Pro M4 Max
- MacBook Pro M3
- MacBook Pro M3 Max
- MacBook Pro M2
- MacBook Pro M2 Pro
- MacBook Pro M2 Max
- MacBook Pro M1
- MacBook Pro M1 Pro
- MacBook Pro M1 Max
Adu langsung:
M3 Pro untuk AI lokal · Mac terbaik untuk LLM lokal · Semua Mac
Cara menghitungnya
Memori: parameter model pada 8, 6, 4, 3, atau 2 bit per bobot ditambah skala grup MLX (setengah bit per bobot), atau format bawaannya, ditambah ruang untuk konteks. Secara bawaan macOS mengizinkan GPU memakai sekitar 75% memori terpadu. Kecepatan: bandwidth memori dibagi jumlah byte yang dibaca per token adalah batas atas untuk satu percakapan; dalam benchmark Apple Silicon publik llama.cpp, proses nyata mencapai sekitar 45% hingga 80% darinya, dan rentang itulah yang ditampilkan. Ini perkiraan, bukan pengukuran: ukur Mac Anda sendiri di MLX Bench. Angka model dari kartu model resmi masing-masing, angka chip dari Spesifikasi Teknis Apple. Diperiksa 2026-10-19. Data sama dengan mlx.app/compare.