Macలో GLM-4.5 Air నడుస్తుందా?

అవును, 96 GB లేదా అంతకంటే ఎక్కువ యూనిఫైడ్ మెమరీతో. GLM-4.5 Airలో 106B పారామీటర్‌లు ఉన్నాయి, వాటిలో ప్రతి టోకెన్‌కు 12B యాక్టివ్‌గా ఉంటాయి; ప్రతి ప్రెసిషన్ వద్ద దీనికి కావలసిన మెమరీ, ప్రతి Apple చిప్ దీన్ని ఎంత వేగంగా నడుపుతుందో ఇక్కడ చూడండి.

4-బిట్ వద్ద మెమరీ64.4 GBవెయిట్‌లు 59.6 GB + కాంటెక్స్ట్
అతిచిన్న Mac96 GB4-బిట్ · 28 Mac కాన్ఫిగరేషన్‌లు
అత్యంత వేగవంతమైన Mac79–141టోకెన్‌లు/సెకను · M5 Ultra 96 GB (అంచనా)

ప్రతి ప్రెసిషన్ వద్ద మెమరీ

వెర్షన్వెయిట్‌లుకాంటెక్స్ట్‌తోఅతిచిన్న Mac
8-బిట్113 GB122 GB192 GB
6-బిట్86.1 GB93 GB128 GB
4-బిట్59.6 GB64.4 GB96 GB
3-బిట్ తక్కువ నాణ్యత46.4 GB50.1 GB96 GB
2-బిట్ తక్కువ నాణ్యత33.1 GB35.7 GB48 GB

ప్రతి Apple చిప్‌పై

GLM-4.5 Airను నడిపే ప్రతి చిప్ యొక్క అతిచిన్న మెమరీ సైజు, దానిలో సరిపోయే ఉత్తమ వెర్షన్, ఆశించదగిన రాసే వేగం.

చిప్కావాలివెర్షన్టోకెన్‌లు/సెకను
M6ఏ సైజూ సరిపోదుచాలా పెద్దది–
M5 Ultra96 GB4-బిట్ బాగా నడుస్తుంది79–141
M5 Max128 GB6-బిట్ బాగా నడుస్తుంది28–50
M5 Pro48 GB2-బిట్ బాగా నడుస్తుంది36–65
M5ఏ సైజూ సరిపోదుచాలా పెద్దది–
M4 Max128 GB6-బిట్ బాగా నడుస్తుంది25–45
M4 Pro48 GB2-బిట్ బాగా నడుస్తుంది32–57
M4ఏ సైజూ సరిపోదుచాలా పెద్దది–
M3 Ultra96 GB4-బిట్ బాగా నడుస్తుంది54–96
M3 Max96 GB4-బిట్ బాగా నడుస్తుంది20–35
M3 Proఏ సైజూ సరిపోదుచాలా పెద్దది–
M3ఏ సైజూ సరిపోదుచాలా పెద్దది–
M2 Ultra128 GB6-బిట్ బాగా నడుస్తుంది37–65
M2 Max96 GB4-బిట్ బాగా నడుస్తుంది26–47
M2 Proఏ సైజూ సరిపోదుచాలా పెద్దది–
M2ఏ సైజూ సరిపోదుచాలా పెద్దది–
M1 Ultra128 GB6-బిట్ బాగా నడుస్తుంది37–65
M1 Max64 GB2-బిట్ బాగా నడుస్తుంది47–84
M1 Proఏ సైజూ సరిపోదుచాలా పెద్దది–
M1ఏ సైజూ సరిపోదుచాలా పెద్దది–

దీన్ని ఎలా నడపాలి

  1. సులభమైన మార్గం: ఉచితమైన, ఓపెన్ సోర్స్ MLX Harnessను డౌన్‌లోడ్ చేయండి. GLM-4.5 Air కోసం వెతికి, మీ Macలో సరిపోయే వెర్షన్‌ను డౌన్‌లోడ్ చేసి, చాట్ చేయండి. ఇది OpenAI-compatible API ద్వారా ఆ మోడల్‌ను మీ ఇతర యాప్‌లకు కూడా అందిస్తుంది.MLX Harness డౌన్‌లోడ్ చేయండిఉచితం · Apple Silicon · macOS 14.5 లేదా తర్వాతి వెర్షన్
  2. Terminalలో Apple MLXతో:pip install mlx-lmmlx_lm.chat --model mlx-community/GLM-4.5-Air-4bitబిల్డ్: Hugging Faceలో mlx-community/GLM-4.5-Air-4bit. ఇతర ప్రెసిషన్‌లు దాని పక్కనే ఉన్నాయి.

దశలవారీగా: Macలో LLMలను డౌన్‌లోడ్ చేసి నడపండి · MLX Harnessను ఎలా వాడాలి · MLX vs Ollama vs llama.cpp

GLM-4.5 Air గురించి

తయారీదారుZ.ai (Zhipu)
పారామీటర్‌లుమొత్తం 106B · యాక్టివ్ 12B (mixture of experts)
కాంటెక్స్ట్128K టోకెన్‌లు
లైసెన్స్MIT
విడుదల2025-07
ఇన్‌పుట్టెక్స్ట్
వెయిట్‌లుzai-org/GLM-4.5-Air

ప్రశ్నలు

GLM-4.5 Airకు ఎంత మెమరీ కావాలి?
4-బిట్ వద్ద సుమారు 59.6 GB వెయిట్‌లు, దానితో పాటు కాంటెక్స్ట్‌కు చోటు: మొత్తం 64.4 GB. Macలో అంటే 96 GB లేదా అంతకంటే ఎక్కువ యూనిఫైడ్ మెమరీ, ఎందుకంటే డిఫాల్ట్‌గా macOS దానిలో సుమారు 75%ను మాత్రమే GPU వాడుకోనిస్తుంది.
Macలో GLM-4.5 Air ఎంత వేగంగా నడుస్తుంది?
రాసే వేగం మెమరీ బ్యాండ్‌విడ్త్‌పై ఆధారపడుతుంది. ఇక్కడ దీనికి అత్యంత వేగవంతమైన Mac 96 GB ఉన్న M5 Ultra, సెకనుకు సుమారు 79–141 టోకెన్‌లు (4-బిట్). దీన్ని నడిపే అతిచిన్న Mac, 96 GB ఉన్న M5 Ultra, సుమారు 79–141 వరకు చేరుతుంది.
GLM-4.5 Air దాని సైజుకు మించిన వేగంతో ఎందుకు నడుస్తుంది?
ఇది mixture-of-experts మోడల్: మెమరీలో 106B పారామీటర్‌లను ఉంచుతుంది, కానీ ప్రతి టోకెన్‌కు 12B మాత్రమే చదువుతుంది, అందుకే చాలా చిన్న మోడల్ వేగంతో రాస్తుంది.

ఇలాంటి మోడల్‌లు

అన్ని మోడల్‌లు · అన్ని Macలు · మీ Macను పోల్చండి

మీ మోడల్ కార్డ్ లేదా README కోసం

Runs on a Mac: GLM-4.5 Air GLM-4.5 Airను బాగా నడిపే అతిచిన్న Macను చూపి, ఇక్కడికి లింక్ ఇస్తుంది.

[![Runs on a Mac](https://mlx.app/badge/run/glm-4.5-air.svg)](https://mlx.app/run/glm-4.5-air)

ఎలా లెక్కించాం

మెమరీ: మోడల్ పారామీటర్‌లు వెయిట్‌కు 8, 6, 4, 3 లేదా 2 బిట్‌ల వద్ద, దానితో పాటు MLX గ్రూప్ స్కేల్‌లు (వెయిట్‌కు అర బిట్), లేదా దాని నేటివ్ ఫార్మాట్, పైన కాంటెక్స్ట్‌కు చోటు. డిఫాల్ట్‌గా macOS యూనిఫైడ్ మెమరీలో సుమారు 75%ను GPU వాడుకోనిస్తుంది. వేగం: మెమరీ బ్యాండ్‌విడ్త్‌ను ప్రతి టోకెన్‌కు చదివే బైట్‌లతో భాగిస్తే ఒక సంభాషణకు గరిష్ఠ పరిమితి వస్తుంది; llama.cpp పబ్లిక్ Apple Silicon బెంచ్‌మార్క్‌లలో నిజమైన రన్‌లు దానిలో సుమారు 45% నుండి 80% వరకు చేరుతాయి, ఆ పరిధినే చూపిస్తున్నాం. ఇవి అంచనాలు, కొలతలు కావు: మీ సొంత Macను MLX Benchలో కొలవండి. మోడల్ వివరాలు ప్రతి అధికారిక మోడల్ కార్డ్ నుండి, చిప్ వివరాలు Apple Tech Specs నుండి. 2026-10-19న తనిఖీ చేశాం. mlx.app/compareలో ఉన్న అదే డేటా.

Macలో GLM-4.5 Air నడుస్తుందా? మెమరీ, వేగం