Mas mabilis ba ang M4 Max kaysa sa M2 Ultra para sa LLM?

Mga 47% na mas mabilis magbasa ng memory ang M2 Ultra kaysa sa M4 Max (800 vs 546 GB/s), kaya mga 47% na mas mabilis itong magsulat sa anumang model na kasya sa dalawa. Ang pagbasa naman ng mahabang prompt ay nakadepende sa GPU compute, na hindi saklaw ng paghahambing na ito.

Alin ang kaya ang mas malalaking model, ang M2 Ultra o ang M4 Max?

Ang M2 Ultra: Hanggang 192 GB na memory ang M2 Ultra, hanggang 128 GB ang M4 Max. Sa pinakamalaking memory nito, maayos nitong napapatakbo ang 49 sa 73 na open model, kumpara sa 47.

M2 Ultra vs M4 Max para sa LLM: memory, bilis, alin ang bilhin

Magkatabi

	M2 Ultra	M4 Max
Mga memory size	64, 128, 192 GB	36, 48, 64, 128 GB
Memory bandwidth	800 GB/s	410–546 GB/s
Para sa model, hanggang	mga 144 GB	mga 96 GB
Mga model na maayos tumakbo	49 sa 73	47 sa 73
Klase ng MLX seat	Ultra	Pro
Makikita sa	Mac Studio (2023), Mac Pro (2023), Mac Pro (Rack, 2023)	MacBook Pro (14-inch, M4 Pro or M4 Max, 2024), MacBook Pro (16-inch, 2024), Mac Studio (2025)

Bilis sa mga sikat na model

Token bawat segundo para sa isang usapan, bawat chip sa pinakamalaking memory size nito (192 GB at 128 GB), gamit ang pinakamagandang bersyon ng model na kasya.

Model	M2 Ultra	M4 Max
Llama 3.1 8B Instruct8B	42–75 8-bit	29–51 8-bit
gpt-oss-20b21B · 3.6B aktibo	189–337 native na 4.25-bit	129–230 native na 4.25-bit
Qwen3.6 35B A3B35B · 3B aktibo	113–200 8-bit	77–137 8-bit
Qwen3.8 27B27B	13–22 8-bit	11–20 6-bit
Llama 3.3 70B Instruct70B	5–9 8-bit	3–6 8-bit
gpt-oss-120b117B · 5.1B aktibo	133–237 native na 4.25-bit	91–162 native na 4.25-bit
Qwen3.5 122B A10B122B · 10B aktibo	34–60 8-bit	44–78 4-bit
DeepSeek V4 Flash 0731284B · 13B aktibo	63–112 3-bit mas mababang kalidad	60–107 2-bit mas mababang kalidad

Mga tanong

Mas mabilis ba ang M4 Max kaysa sa M2 Ultra para sa LLM?: Mga 47% na mas mabilis magbasa ng memory ang M2 Ultra kaysa sa M4 Max (800 vs 546 GB/s), kaya mga 47% na mas mabilis itong magsulat sa anumang model na kasya sa dalawa. Ang pagbasa naman ng mahabang prompt ay nakadepende sa GPU compute, na hindi saklaw ng paghahambing na ito.
Alin ang kaya ang mas malalaking model, ang M2 Ultra o ang M4 Max?: Ang M2 Ultra: Hanggang 192 GB na memory ang M2 Ultra, hanggang 128 GB ang M4 Max. Sa pinakamalaking memory nito, maayos nitong napapatakbo ang 49 sa 73 na open model, kumpara sa 47.

Iba pang paghahambing

Ang M2 Ultra para sa local AI · Ang M4 Max para sa local AI · Ihambing ang bawat model · Ang pinakamagandang Mac para sa local LLM

Paano ito kinuwenta

Memory: ang mga parameter ng model sa 8, 6, 4, 3 o 2 bit kada weight dagdag ang group scales ng MLX (kalahating bit kada weight), o ang native format nito, at may espasyo pa para sa context. Bilang default, mga 75% ng unified memory ang ipinapagamit ng macOS sa GPU. Bilis: ang memory bandwidth na hinati sa mga byte na binabasa kada token ang pinakamataas na posible para sa isang usapan; sa mga pampublikong benchmark ng llama.cpp sa Apple Silicon, umaabot ang totoong takbo sa mga 45% hanggang 80% nito, at iyon ang range na ipinapakita. Mga tantiya ito, hindi sukat: sukatin ang sarili mong Mac sa MLX Bench. Ang mga numero ng model ay mula sa opisyal na model card ng bawat isa, at ang sa chip ay mula sa Tech Specs ng Apple. Sinuri noong 2026-10-19. Parehong data ng mlx.app/compare.