Je, RTX 5090 ina kasi zaidi kuliko M5 Max kwa LLM?

RTX 5090 husoma kumbukumbu takriban 192% haraka zaidi kuliko M5 Max (1,792 dhidi ya 614 GB/s), hivyo huandika takriban 192% haraka zaidi na modeli yoyote inayotosha zote mbili. Katika jaribio lililopimwa la llama.cpp, RTX 5090 husoma kidokezo takriban mara 4.4 kwa kasi zaidi (tokeni 14,073 dhidi ya 3,220 kwa sekunde). Kusoma kidokezo hutegemea nguvu ya kukokotoa ya GPU, si kipimo data cha kumbukumbu, na ndicho huamua muda wa kusubiri neno la kwanza kwa hati ndefu au msimbo mkubwa.

Ipi inaweza kuendesha modeli kubwa zaidi, M5 Max au RTX 5090?

M5 Max ina takriban GB 96 kwa modeli, RTX 5090 takriban GB 31. Modeli wazi maarufu 47 kati ya 73 zinaendeshwa vizuri kwenye M5 Max, 38 kwenye RTX 5090.

Je, MLX Node inaendeshwa kwenye RTX 5090?

Hapana. MLX Node na MLX Harness zinaendeshwa kwenye Mac zenye Apple Silicon pekee, kwa mfumo wa MLX wa Apple.

M5 Max dhidi ya RTX 5090 kwa LLM: kumbukumbu, kasi, ipi ununue

Kando kwa kando

	M5 Max	RTX 5090
Ni nini	MacBook Pro (14-inch, M5 Pro or M5 Max), MacBook Pro (16-inch, M5 Pro or M5 Max), Mac Studio (M5 Max or M5 Ultra)	Kadi ya michoro kwa PC ya mezani
Ukubwa wa kumbukumbu	36, 48, 64, 128 GB	32 GB
Bandwidth ya kumbukumbu	460–614 GB/s	1,792 GB/s
Kwa modeli, upeo	takriban GB 96	takriban GB 31
Modeli zinazoenda vizuri	47 kati ya 73	38 kati ya 73
Iliyopimwa: kuandika	120 tok/s	290 tok/s
Iliyopimwa: kusoma kidokezo	3,220 tok/s	14,073 tok/s

Safu zilizopimwa: matokeo ya kasi zaidi ya kila mashine katika vipimo vya wazi vya llama.cpp kwa Llama 2 7B Q4_0, ikiandika tokeni 128 (tg128) na kusoma kidokezo cha tokeni 512 (pp512), kwa tokeni kwa sekunde. Mac ilitumia Metal, RTX 5090 ilitumia CUDA. Matokeo ya Apple Silicon · Matokeo ya RTX 5090 Kwa modeli tunahesabu GB 32 za RTX 5090 yenyewe ukitoa takriban GB 1, na takriban 75% ya kumbukumbu ya pamoja ya Mac, kiwango cha kawaida cha macOS.

Kila moja inashinda wapi

Kasi ya kuandika. RTX 5090 husoma kumbukumbu takriban 192% haraka zaidi kuliko M5 Max (1,792 dhidi ya 614 GB/s), hivyo huandika takriban 192% haraka zaidi na modeli yoyote inayotosha zote mbili.
Ukubwa wa modeli. M5 Max ina takriban GB 96 kwa modeli, RTX 5090 takriban GB 31. Modeli wazi maarufu 47 kati ya 73 zinaendeshwa vizuri kwenye M5 Max, 38 kwenye RTX 5090.
Kusoma vidokezo virefu. Katika jaribio lililopimwa la llama.cpp, RTX 5090 husoma kidokezo takriban mara 4.4 kwa kasi zaidi (tokeni 14,073 dhidi ya 3,220 kwa sekunde). Kusoma kidokezo hutegemea nguvu ya kukokotoa ya GPU, si kipimo data cha kumbukumbu, na ndicho huamua muda wa kusubiri neno la kwanza kwa hati ndefu au msimbo mkubwa.
Programu. RTX 5090 hutumia CUDA ya NVIDIA, ambayo programu nyingi za AI huiunga mkono kwanza, ikiwemo msimbo wa mafunzo na zana nyingi za picha na video. Kwenye Mac unaendesha modeli kwa MLX, backend ya Metal ya llama.cpp au backend ya MPS ya PyTorch badala yake.
Kinachoizunguka. Kadi ya michoro inahitaji PC ya kuizunguka, na GB 32 zake zenyewe ndizo kikomo: modeli isiyotosha lazima iendeshwe kwa sehemu kutoka kumbukumbu ya mfumo ya PC, iliyo polepole zaidi sana, au igawanywe kwenye kadi ya pili.
Mac. Pia ni kompyuta ya kila siku, na huendesha MLX Harness na MLX Node, zilizotengenezwa kwa Apple Silicon.

Kasi na modeli maarufu

Tokeni kwa sekunde kwa mazungumzo moja, kila chipu ikiwa na ukubwa wake mkubwa zaidi wa kumbukumbu (GB 128 na GB 32), na toleo bora la modeli linalotosha.

Modeli	M5 Max	RTX 5090
Llama 3.1 8B Instruct8B	33–58 8-bit	95–169 8-bit
gpt-oss-20b21B · 3.6B zinazotumika	145–259 4.25-bit asili	424–755 4.25-bit asili
Qwen3.6 35B A3B35B · 3B zinazotumika	86–154 8-bit	336–597 6-bit
Qwen3.8 27B27B	10–17 8-bit	28–50 8-bit
Llama 3.3 70B Instruct70B	4–7 8-bit	37–65 2-bit ubora wa chini
gpt-oss-120b117B · 5.1B zinazotumika	102–182 4.25-bit asili	kubwa mno
Qwen3.5 122B A10B122B · 10B zinazotumika	49–88 4-bit	kubwa mno
DeepSeek V4 Flash 0731284B · 13B zinazotumika	67–120 2-bit ubora wa chini	kubwa mno

Maswali

Je, RTX 5090 ina kasi zaidi kuliko M5 Max kwa LLM?: RTX 5090 husoma kumbukumbu takriban 192% haraka zaidi kuliko M5 Max (1,792 dhidi ya 614 GB/s), hivyo huandika takriban 192% haraka zaidi na modeli yoyote inayotosha zote mbili. Katika jaribio lililopimwa la llama.cpp, RTX 5090 husoma kidokezo takriban mara 4.4 kwa kasi zaidi (tokeni 14,073 dhidi ya 3,220 kwa sekunde). Kusoma kidokezo hutegemea nguvu ya kukokotoa ya GPU, si kipimo data cha kumbukumbu, na ndicho huamua muda wa kusubiri neno la kwanza kwa hati ndefu au msimbo mkubwa.
Ipi inaweza kuendesha modeli kubwa zaidi, M5 Max au RTX 5090?: M5 Max ina takriban GB 96 kwa modeli, RTX 5090 takriban GB 31. Modeli wazi maarufu 47 kati ya 73 zinaendeshwa vizuri kwenye M5 Max, 38 kwenye RTX 5090.
Je, MLX Node inaendeshwa kwenye RTX 5090?: Hapana. MLX Node na MLX Harness zinaendeshwa kwenye Mac zenye Apple Silicon pekee, kwa mfumo wa MLX wa Apple.

Ulinganisho zaidi

M5 Max kwa AI ya ndani ya kifaa · Linganisha kila modeli · Mac bora kwa LLM za ndani

Jinsi inavyokokotolewa

Kumbukumbu: vigezo vya modeli kwa biti 8, 6, 4, 3 au 2 kwa kila weight pamoja na group scales za MLX (nusu biti kwa kila weight), au muundo wake asili, pamoja na nafasi ya context juu yake. Kwa chaguo-msingi macOS huiruhusu GPU kutumia takriban 75% ya unified memory. Kasi: bandwidth ya kumbukumbu ikigawanywa kwa baiti zinazosomwa kwa kila tokeni ndiyo kikomo cha juu kwa mazungumzo moja; katika benchmarks za umma za llama.cpp kwenye Apple Silicon uendeshaji halisi hufikia takriban 45% hadi 80% yake, na huo ndio upana unaoonyeshwa. Haya ni makadirio, si vipimo: pima Mac yako mwenyewe kwenye MLX Bench. Takwimu za modeli ni kutoka kwa kadi rasmi ya kila modeli, takwimu za chipu ni kutoka Tech Specs za Apple. Imekaguliwa 2026-10-19. Data ileile ya mlx.app/compare.

Data ya RTX 5090: NVIDIA: GeForce RTX 5090 (specs: 32 GB GDDR7, 512-bit, 575 W TGP), NVIDIA RTX Blackwell GPU Architecture whitepaper (Tables 1 and 4).