M5 Pro untuk AI lokal.

M5 Pro memiliki hingga 64 GB memori terpadu, dibaca hingga 307 GB/s. Inilah artinya untuk menjalankan model bahasa di Mac dengan chip ini, dihitung dari angka Apple sendiri.

1Spesifikasi yang penting untuk AI

Memori terpadu64 GB
Bandwidth memori307 GB/s
Ada di14- and 16-inch MacBook Pro (2026), Mac mini (2026)
Kursi khusus untuknyaKursi Pro Latest: menambang hingga 120 MLX per hari

2Model yang muat

Pada 4 bit per bobot, model butuh sedikit lebih dari setengah gigabyte per miliar parameter, ditambah ruang untuk konteks dan macOS. Dengan 64 GB, M5 Pro dengan lega menampung model hingga sekitar 85 miliar parameter.

Model 4-bitMemori yang dibutuhkanMuat di M5 Pro
Model 8B4,5 GBYa
Model 14B7,9 GBYa
Model 32B18 GBYa
Model 70B39,4 GBYa
gpt-oss-120b, mixture-of-experts65 GBTidak
Qwen3.5-397B-A17B, mixture-of-experts223,3 GBTidak
DeepSeek-V4.1-Flash, mixture-of-experts316 GBTidak

3Seberapa cepat

Kecepatan menulis teks dibatasi oleh bandwidth memori: setiap token baru membaca bobot aktif model satu kali. Membagi 307 GB/s milik M5 Pro dengan jumlah byte yang dibaca per token menghasilkan batas atas di bawah. Penggunaan nyata biasanya mencapai sekitar 45% hingga 80% darinya (benchmark llama.cpp).

Model 4-bitDibaca per tokenBatas atas satu chat
Model 8B4,5 GB68 token/detik
Model 14B7,9 GB39 token/detik
Model 32B18 GB17 token/detik
Model 70B39,4 GB8 token/detik

Chip generasi M5 menambahkan akselerator neural ke GPU, sehingga membaca prompt beberapa kali lebih cepat daripada M4: Apple mengukur token pertama muncul 3,3 hingga 4,1 kali lebih cepat dengan MLX (Apple).

5Bandingkan dengan chip lain

6Pertanyaan

Bisakah M5 Pro menjalankan model 70B?
Bisa. Model 70B pada 4-bit butuh sekitar 40 GB, dan M5 Pro punya hingga 64 GB. Batas atasnya sekitar 8 token per detik untuk satu chat.
Berapa token per detik yang didapat M5 Pro?
Untuk model 8B pada 4-bit, batas atasnya sekitar 68 token per detik, dan penggunaan nyata mencapai kira-kira setengah hingga empat perlimanya. Model yang lebih besar melambat secara proporsional.
Apakah M5 Pro bagus untuk AI?
Untuk menjalankan model secara lokal, memori dan bandwidth paling menentukan. M5 Pro punya hingga 64 GB pada 307 GB/s, cukup untuk model hingga sekitar 85 miliar parameter. Mac ini juga bisa memperoleh token dengan menjalankan pekerjaan AI untuk MLX Network lewat MLX Node.

Sumber

  1. Apple: M5 Pro and M5 Maxapple.com
  2. Apple: Mac mini (2026) specssupport.apple.com
M5 Pro untuk LLM lokal: memori, kecepatan, model | MLX