Adakah M3 lebih pantas daripada M2 untuk LLM?

Lebih kurang sama: lebar jalur memori kedua-duanya hanya berbeza beberapa peratus. Kedua-duanya tersedia sehingga 24 GB memori.

Yang mana boleh menjalankan model lebih besar, M2 atau M3?

Tiada satu pun: kedua-duanya sehingga 24 GB. Pada saiz itu M2 menjalankan 20 dan M3 20 daripada 73 model terbuka dengan baik; yang lebih pantas membawa lebih banyak model melepasi 10 token sesaat.

M2 vs M3 untuk LLM: memori, kelajuan, pilih mana

Bersebelahan

	M2	M3
Saiz memori	8, 16, 24 GB	8, 16, 24 GB
Lebar jalur memori	100 GB/s	100 GB/s
Untuk model, paling banyak	kira-kira 18 GB	kira-kira 18 GB
Model yang berjalan baik	20 daripada 73	20 daripada 73
Kelas kerusi MLX	Core	Core
Terdapat dalam	MacBook Air (M2, 2022), MacBook Pro (13-inch, M2, 2022), MacBook Air (15-inch, M2, 2023), Mac mini (2023)	MacBook Pro (14-inch, M3, Nov 2023), iMac (24-inch, M3, 2023, Two ports), iMac (24-inch, M3, 2023, Four ports), MacBook Air (13-inch, M3, 2024), MacBook Air (15-inch, M3, 2024)

Kelajuan dengan model popular

Token sesaat untuk satu perbualan, setiap cip pada saiz memori terbesarnya (24 GB dan 24 GB), dengan versi terbaik model yang muat.

Model	M2	M3
Llama 3.1 8B Instruct8B	10–18 4-bit	10–18 4-bit
gpt-oss-20b21B · 3.6B aktif	24–42 4.25-bit asli	24–42 4.25-bit asli
Qwen3.6 35B A3B35B · 3B aktif	35–62 3-bit kualiti lebih rendah	35–62 3-bit kualiti lebih rendah
Qwen3.8 27B27B	3–5 4-bit	3–5 4-bit
Llama 3.3 70B Instruct70B	terlalu besar	terlalu besar
gpt-oss-120b117B · 5.1B aktif	terlalu besar	terlalu besar
Qwen3.5 122B A10B122B · 10B aktif	terlalu besar	terlalu besar
DeepSeek V4 Flash 0731284B · 13B aktif	terlalu besar	terlalu besar

Soalan

Adakah M3 lebih pantas daripada M2 untuk LLM?: Lebih kurang sama: lebar jalur memori kedua-duanya hanya berbeza beberapa peratus. Kedua-duanya tersedia sehingga 24 GB memori.
Yang mana boleh menjalankan model lebih besar, M2 atau M3?: Tiada satu pun: kedua-duanya sehingga 24 GB. Pada saiz itu M2 menjalankan 20 dan M3 20 daripada 73 model terbuka dengan baik; yang lebih pantas membawa lebih banyak model melepasi 10 token sesaat.

Lebih banyak perbandingan

M2 untuk AI tempatan · M3 untuk AI tempatan · Bandingkan semua model · Mac terbaik untuk LLM tempatan

Cara ia dikira

Memori: parameter model pada 8, 6, 4, 3 atau 2 bit setiap pemberat serta skala kumpulan MLX (setengah bit setiap pemberat), atau format aslinya, dengan ruang untuk konteks di atasnya. Secara lalai macOS membenarkan GPU menggunakan kira-kira 75% memori bersatu. Kelajuan: lebar jalur memori dibahagikan dengan bait yang dibaca bagi setiap token ialah had atas untuk satu perbualan; dalam penanda aras Apple Silicon awam llama.cpp, larian sebenar mencapai kira-kira 45% hingga 80% daripadanya, dan julat itulah yang ditunjukkan. Ini anggaran, bukan ukuran: ukur Mac anda sendiri di MLX Bench. Angka model daripada kad model rasmi setiap model, angka cip daripada Spesifikasi Teknikal Apple. Disemak 2026-10-19. Data yang sama seperti mlx.app/compare.