Adakah DGX Spark lebih pantas daripada M5 Max untuk LLM?

M5 Max membaca memori kira-kira 125% lebih pantas daripada DGX Spark (614 vs 273 GB/s), jadi ia menulis kira-kira 125% lebih pantas dengan mana-mana model yang muat dalam kedua-duanya. Dalam ujian diukur llama.cpp, kedua-duanya membaca prompt pada kadar yang hampir sama (3,220 dan 3,062 token sesaat).

Yang mana boleh menjalankan model lebih besar, M5 Max atau DGX Spark?

Kedua-duanya ada kira-kira 96 GB untuk model. 47 daripada 73 model terbuka popular berjalan lancar pada M5 Max, 39 pada DGX Spark.

Adakah MLX Node berjalan pada DGX Spark?

Tidak. MLX Node dan MLX Harness hanya berjalan pada Mac dengan Apple Silicon, menggunakan rangka kerja MLX daripada Apple.

M5 Max vs DGX Spark untuk LLM: memori, kelajuan, pilih mana

Bersebelahan

	M5 Max	DGX Spark
Apakah ia	MacBook Pro (14-inch, M5 Pro or M5 Max), MacBook Pro (16-inch, M5 Pro or M5 Max), Mac Studio (M5 Max or M5 Ultra)	Komputer kecil yang lengkap
Saiz memori	36, 48, 64, 128 GB	128 GB
Lebar jalur memori	460–614 GB/s	273 GB/s
Untuk model, paling banyak	kira-kira 96 GB	kira-kira 96 GB
Model yang berjalan baik	47 daripada 73	39 daripada 73
Diukur: menulis	120 tok/s	57 tok/s
Diukur: membaca prompt	3,220 tok/s	3,062 tok/s

Baris diukur: keputusan terpantas setiap mesin dalam penanda aras awam llama.cpp dengan Llama 2 7B Q4_0, semasa menulis 128 token (tg128) dan membaca prompt 512 token (pp512), dalam token sesaat. Mac menggunakan Metal, DGX Spark menggunakan CUDA. Keputusan Apple Silicon · Keputusan DGX Spark Untuk model, kami mengira kira-kira 75% memori pada kedua-duanya, lalai macOS, kerana DGX Spark juga berkongsi satu memori antara CPU dan GPU. Berapa banyak yang benar-benar boleh digunakan GPUnya bergantung pada sistem pengendalian dan tetapannya.

Di mana setiap satu menang

Kelajuan menulis. M5 Max membaca memori kira-kira 125% lebih pantas daripada DGX Spark (614 vs 273 GB/s), jadi ia menulis kira-kira 125% lebih pantas dengan mana-mana model yang muat dalam kedua-duanya.
Saiz model. Kedua-duanya ada kira-kira 96 GB untuk model. 47 daripada 73 model terbuka popular berjalan lancar pada M5 Max, 39 pada DGX Spark.
Membaca prompt panjang. Dalam ujian diukur llama.cpp, kedua-duanya membaca prompt pada kadar yang hampir sama (3,220 dan 3,062 token sesaat).
Perisian. DGX Spark menggunakan CUDA daripada NVIDIA, yang disokong dahulu oleh kebanyakan perisian AI, termasuk kod latihan dan banyak alat imej dan video. Pada Mac, model dijalankan dengan MLX, backend Metal llama.cpp atau backend MPS PyTorch.
Di sekelilingnya. Kedua-duanya komputer lengkap yang menyimpan model dalam satu memori yang dikongsi CPU dan GPU.
Mac. Ia juga komputer harian, dan menjalankan MLX Harness serta MLX Node, yang dibuat untuk Apple Silicon.

Kelajuan dengan model popular

Token sesaat untuk satu perbualan, setiap cip pada saiz memori terbesarnya (128 GB dan 128 GB), dengan versi terbaik model yang muat.

Model	M5 Max	DGX Spark
Llama 3.1 8B Instruct8B	33–58 8-bit	14–26 8-bit
gpt-oss-20b21B · 3.6B aktif	145–259 4.25-bit asli	65–115 4.25-bit asli
Qwen3.6 35B A3B35B · 3B aktif	86–154 8-bit	38–68 8-bit
Qwen3.8 27B27B	10–17 8-bit	4–8 8-bit
Llama 3.3 70B Instruct70B	4–7 8-bit	2–3 8-bit
gpt-oss-120b117B · 5.1B aktif	102–182 4.25-bit asli	45–81 4.25-bit asli
Qwen3.5 122B A10B122B · 10B aktif	49–88 4-bit	22–39 4-bit
DeepSeek V4 Flash 0731284B · 13B aktif	67–120 2-bit kualiti lebih rendah	30–53 2-bit kualiti lebih rendah

Soalan

Adakah DGX Spark lebih pantas daripada M5 Max untuk LLM?: M5 Max membaca memori kira-kira 125% lebih pantas daripada DGX Spark (614 vs 273 GB/s), jadi ia menulis kira-kira 125% lebih pantas dengan mana-mana model yang muat dalam kedua-duanya. Dalam ujian diukur llama.cpp, kedua-duanya membaca prompt pada kadar yang hampir sama (3,220 dan 3,062 token sesaat).
Yang mana boleh menjalankan model lebih besar, M5 Max atau DGX Spark?: Kedua-duanya ada kira-kira 96 GB untuk model. 47 daripada 73 model terbuka popular berjalan lancar pada M5 Max, 39 pada DGX Spark.
Adakah MLX Node berjalan pada DGX Spark?: Tidak. MLX Node dan MLX Harness hanya berjalan pada Mac dengan Apple Silicon, menggunakan rangka kerja MLX daripada Apple.

Lebih banyak perbandingan

M5 Max untuk AI tempatan · Bandingkan semua model · Mac terbaik untuk LLM tempatan

Cara ia dikira

Memori: parameter model pada 8, 6, 4, 3 atau 2 bit setiap pemberat serta skala kumpulan MLX (setengah bit setiap pemberat), atau format aslinya, dengan ruang untuk konteks di atasnya. Secara lalai macOS membenarkan GPU menggunakan kira-kira 75% memori bersatu. Kelajuan: lebar jalur memori dibahagikan dengan bait yang dibaca bagi setiap token ialah had atas untuk satu perbualan; dalam penanda aras Apple Silicon awam llama.cpp, larian sebenar mencapai kira-kira 45% hingga 80% daripadanya, dan julat itulah yang ditunjukkan. Ini anggaran, bukan ukuran: ukur Mac anda sendiri di MLX Bench. Angka model daripada kad model rasmi setiap model, angka cip daripada Spesifikasi Teknikal Apple. Disemak 2026-10-19. Data yang sama seperti mlx.app/compare.

Data DGX Spark: NVIDIA: DGX Spark (specs).