Kaya bang patakbuhin ng Mac ang GLM-4.7 Flash?

Oo, kung may 32 GB na unified memory o higit pa. May 30B na parameter ang GLM-4.7 Flash, 3B dito ang aktibo sa bawat token; narito ang memory na kailangan nito sa bawat precision at kung gaano ito kabilis sa bawat Apple chip.

Memory sa 4-bit18.4 GBweights 16.9 GB + context
Pinakamaliit na Mac32 GB4-bit · 55 configuration ng Mac
Pinakamabilis na Mac169–300token/s · M5 Ultra 96 GB (tantiya)

Memory sa bawat precision

BersyonWeightsKasama ang contextPinakamaliit na Mac
8-bit31.9 GB34.5 GB48 GB
6-bit24.4 GB26.4 GB36 GB
4-bit16.9 GB18.4 GB32 GB
3-bit mas mababang kalidad13.1 GB14.6 GB24 GB
2-bit mas mababang kalidad9.4 GB10.9 GB16 GB

Sa bawat Apple chip

Ang pinakamaliit na memory size ng bawat chip na kaya ang GLM-4.7 Flash, ang pinakamagandang bersyong kasya rito, at ang bilis ng pagsusulat na maaasahan mo.

ChipKailanganBersyonToken/s
M632 GB4-bit Maayos45–80
M5 Ultra96 GB8-bit Maayos169–300
M5 Max36 GB6-bit Maayos86–153
M5 Pro48 GB8-bit Maayos43–77
M532 GB4-bit Maayos41–72
M4 Max36 GB6-bit Maayos77–137
M4 Pro48 GB8-bit Maayos38–68
M432 GB4-bit Maayos32–56
M3 Ultra96 GB8-bit Maayos115–205
M3 Max36 GB6-bit Maayos56–100
M3 Pro36 GB6-bit Maayos28–50
M316 GB2-bit Maayos50–89
M2 Ultra64 GB8-bit Maayos113–200
M2 Max32 GB4-bit Maayos106–188
M2 Pro32 GB4-bit Maayos53–94
M216 GB2-bit Maayos50–89
M1 Ultra64 GB8-bit Maayos113–200
M1 Max32 GB4-bit Maayos106–188
M1 Pro32 GB4-bit Maayos53–94
M116 GB2-bit Maayos34–60

Paano ito patakbuhin

  1. Ang madaling paraan: i-download ang MLX Harness, libre at open source. Hanapin ang GLM-4.7 Flash, i-download ang bersyong kasya sa Mac mo, at mag-chat. Ibinibigay rin nito ang model sa iba mo pang app sa pamamagitan ng API na compatible sa OpenAI.I-download ang MLX HarnessLibre · Apple Silicon · macOS 14.5 o mas bago
  2. Sa Terminal gamit ang MLX ng Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/GLM-4.7-Flash-4bitBuild: mlx-community/GLM-4.7-Flash-4bit sa Hugging Face. Katabi nito ang ibang precision.

Hakbang-hakbang: mag-download at magpatakbo ng LLM sa Mac · paano gamitin ang MLX Harness · MLX vs Ollama vs llama.cpp

Tungkol sa GLM-4.7 Flash

Gawa ngZ.ai (Zhipu)
Mga parameter30B kabuuan · 3B aktibo (mixture of experts)
Context198K token
LisensyaMIT
Inilabas2026-01
InputText
Weightszai-org/GLM-4.7-Flash

Mga tanong

Gaano karaming memory ang kailangan ng GLM-4.7 Flash?
Mga 16.9 GB ng weights sa 4-bit, dagdag ang espasyo para sa context: 18.4 GB lahat-lahat. Sa Mac, ibig sabihin nito ay 32 GB na unified memory o higit pa, dahil bilang default, mga 75% nito ang ipinapagamit ng macOS sa GPU.
Gaano kabilis ang GLM-4.7 Flash sa Mac?
Nakadepende sa memory bandwidth ang bilis ng pagsusulat. Ang pinakamabilis na Mac para dito ay M5 Ultra na may 96 GB, sa mga 169–300 token bawat segundo (8-bit). Ang pinakamaliit na Mac na kaya ito, na may 32 GB, ay umaabot sa mga 106–188 sa M2 Max.
Bakit mas mabilis ang GLM-4.7 Flash kaysa sa inaasahan sa laki nito?
Isa itong mixture-of-experts na model: may 30B na parameter ito sa memory pero 3B lang ang binabasa nito sa bawat token, kaya nagsusulat ito sa bilis ng mas maliit na model.

Mga katulad na model

Bawat model · Bawat Mac · Ihambing ang Mac mo

Para sa model card o README mo

Runs on a Mac: GLM-4.7 Flash Ipinapakita ang pinakamaliit na Mac na maayos na nagpapatakbo ng GLM-4.7 Flash at nagli-link dito.

[![Runs on a Mac](https://mlx.app/badge/run/glm-4.7-flash.svg)](https://mlx.app/run/glm-4.7-flash)

Paano ito kinuwenta

Memory: ang mga parameter ng model sa 8, 6, 4, 3 o 2 bit kada weight dagdag ang group scales ng MLX (kalahating bit kada weight), o ang native format nito, at may espasyo pa para sa context. Bilang default, mga 75% ng unified memory ang ipinapagamit ng macOS sa GPU. Bilis: ang memory bandwidth na hinati sa mga byte na binabasa kada token ang pinakamataas na posible para sa isang usapan; sa mga pampublikong benchmark ng llama.cpp sa Apple Silicon, umaabot ang totoong takbo sa mga 45% hanggang 80% nito, at iyon ang range na ipinapakita. Mga tantiya ito, hindi sukat: sukatin ang sarili mong Mac sa MLX Bench. Ang mga numero ng model ay mula sa opisyal na model card ng bawat isa, at ang sa chip ay mula sa Tech Specs ng Apple. Sinuri noong 2026-10-19. Parehong data ng mlx.app/compare.

Kaya ba ng Mac ang GLM-4.7 Flash? Memory at bilis