Je, Mac Studio yenye M5 Max inafaa kwa LLM za ndani?

Ikiwa na GB 128 huendesha vizuri modeli huria 47 kati ya 73, hadi Qwen3.5 122B A10B, na huandika takriban tokeni 145–259 kwa sekunde na gpt-oss-20b. M5 Max husoma kumbukumbu kwa 614 GB/s, jambo linaloamua kasi yake ya kuandika.

Mac Studio yenye M5 Max inapaswa kuwa na kumbukumbu kiasi gani kwa AI?

Ikiwa na GB 36 huendesha vizuri modeli huria 38; ikiwa na GB 128, 47, hadi Qwen3.5 122B A10B. Kumbukumbu huamua modeli zipi zinatosha, na haiwezi kuongezwa baadaye.

Mac Studio yenye M5 Max kwa AI ya ndani: LLM zipi inaendesha

Kwa ukubwa wa kumbukumbu

Kumbukumbu	Zinaenda vizuri	Kubwa zaidi inayoenda vizuri	gpt-oss-20b
36 GB460 GB/s	38	Qwen3.6 35B A3B	109–194 tok/s
48 GB614 GB/s	38	Qwen3.6 35B A3B	145–259 tok/s
64 GB614 GB/s	39	Nemotron 3.5 Bolt 74B A9B	145–259 tok/s
128 GB614 GB/s	47	Qwen3.5 122B A10B	145–259 tok/s

Modeli za Mac: Mac Studio (M5 Max or M5 Ultra). Si kila ukubwa wa kumbukumbu unapatikana kwa kila modeli ya Mac; Tech Specs za Apple zinaorodhesha kile ambacho kila moja inakuja nacho.

Maswali

Je, Mac Studio yenye M5 Max inafaa kwa LLM za ndani?: Ikiwa na GB 128 huendesha vizuri modeli huria 47 kati ya 73, hadi Qwen3.5 122B A10B, na huandika takriban tokeni 145–259 kwa sekunde na gpt-oss-20b. M5 Max husoma kumbukumbu kwa 614 GB/s, jambo linaloamua kasi yake ya kuandika.
Mac Studio yenye M5 Max inapaswa kuwa na kumbukumbu kiasi gani kwa AI?: Ikiwa na GB 36 huendesha vizuri modeli huria 38; ikiwa na GB 128, 47, hadi Qwen3.5 122B A10B. Kumbukumbu huamua modeli zipi zinatosha, na haiwezi kuongezwa baadaye.

Mac nyingine

Mac Studio yenye chipu nyingine:

Mac nyingine zenye M5 Max:

MacBook Pro M5 Max

Ana kwa ana:

Dhidi ya PC na kadi za michoro:

M5 Max kwa AI ya ndani ya kifaa · Mac bora kwa LLM za ndani · Kila Mac

Jinsi inavyokokotolewa

Kumbukumbu: vigezo vya modeli kwa biti 8, 6, 4, 3 au 2 kwa kila weight pamoja na group scales za MLX (nusu biti kwa kila weight), au muundo wake asili, pamoja na nafasi ya context juu yake. Kwa chaguo-msingi macOS huiruhusu GPU kutumia takriban 75% ya unified memory. Kasi: bandwidth ya kumbukumbu ikigawanywa kwa baiti zinazosomwa kwa kila tokeni ndiyo kikomo cha juu kwa mazungumzo moja; katika benchmarks za umma za llama.cpp kwenye Apple Silicon uendeshaji halisi hufikia takriban 45% hadi 80% yake, na huo ndio upana unaoonyeshwa. Haya ni makadirio, si vipimo: pima Mac yako mwenyewe kwenye MLX Bench. Takwimu za modeli ni kutoka kwa kadi rasmi ya kila modeli, takwimu za chipu ni kutoka Tech Specs za Apple. Imekaguliwa 2026-10-19. Data ileile ya mlx.app/compare.