Bolehkah Mac menjalankan GLM-4.5 Air?

Ya, dengan 96 GB memori bersatu atau lebih. GLM-4.5 Air mempunyai 106B parameter, 12B daripadanya aktif bagi setiap token; berikut memori yang diperlukan pada setiap kepersisan dan sepantas mana setiap cip Apple menjalankannya.

Memori pada 4-bit64.4 GBpemberat 59.6 GB + konteks
Mac terkecil96 GB4-bit · 28 konfigurasi Mac
Mac terpantas79–141token/s · M5 Ultra 96 GB (anggaran)

Memori pada setiap kepersisan

VersiPemberatDengan konteksMac terkecil
8-bit113 GB122 GB192 GB
6-bit86.1 GB93 GB128 GB
4-bit59.6 GB64.4 GB96 GB
3-bit kualiti lebih rendah46.4 GB50.1 GB96 GB
2-bit kualiti lebih rendah33.1 GB35.7 GB48 GB

Pada setiap cip Apple

Saiz memori terkecil setiap cip yang menjalankan GLM-4.5 Air, versi terbaik yang muat, dan kelajuan menulis yang boleh anda jangkakan.

CipPerluVersiToken/s
M6tiada saiz yang muatTerlalu besar–
M5 Ultra96 GB4-bit Berjalan baik79–141
M5 Max128 GB6-bit Berjalan baik28–50
M5 Pro48 GB2-bit Berjalan baik36–65
M5tiada saiz yang muatTerlalu besar–
M4 Max128 GB6-bit Berjalan baik25–45
M4 Pro48 GB2-bit Berjalan baik32–57
M4tiada saiz yang muatTerlalu besar–
M3 Ultra96 GB4-bit Berjalan baik54–96
M3 Max96 GB4-bit Berjalan baik20–35
M3 Protiada saiz yang muatTerlalu besar–
M3tiada saiz yang muatTerlalu besar–
M2 Ultra128 GB6-bit Berjalan baik37–65
M2 Max96 GB4-bit Berjalan baik26–47
M2 Protiada saiz yang muatTerlalu besar–
M2tiada saiz yang muatTerlalu besar–
M1 Ultra128 GB6-bit Berjalan baik37–65
M1 Max64 GB2-bit Berjalan baik47–84
M1 Protiada saiz yang muatTerlalu besar–
M1tiada saiz yang muatTerlalu besar–

Cara menjalankannya

  1. Cara mudah: muat turun MLX Harness, percuma dan sumber terbuka. Cari GLM-4.5 Air, muat turun versi yang sesuai dengan Mac anda, dan mula bersembang. Ia juga menyediakan model kepada aplikasi anda yang lain melalui API yang serasi dengan OpenAI.Muat turun MLX HarnessPercuma · Apple Silicon · macOS 14.5 atau lebih baharu
  2. Dalam Terminal dengan MLX daripada Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/GLM-4.5-Air-4bitBinaan: mlx-community/GLM-4.5-Air-4bit di Hugging Face. Kepersisan lain ada di sebelahnya.

Langkah demi langkah: muat turun dan jalankan LLM pada Mac · cara menggunakan MLX Harness · MLX vs Ollama vs llama.cpp

Tentang GLM-4.5 Air

Dibuat olehZ.ai (Zhipu)
Parameter106B jumlah · 12B aktif (mixture of experts)
Konteks128K token
LesenMIT
Dikeluarkan2025-07
InputTeks
Pemberatzai-org/GLM-4.5-Air

Soalan

Berapakah memori yang diperlukan oleh GLM-4.5 Air?
Kira-kira 59.6 GB pemberat pada 4-bit, serta ruang untuk konteks: 64.4 GB kesemuanya. Pada Mac, ini bermakna 96 GB memori bersatu atau lebih, kerana secara lalai macOS membenarkan GPU menggunakan kira-kira 75% daripadanya.
Sepantas mana GLM-4.5 Air pada Mac?
Kelajuan menulis bergantung pada lebar jalur memori. Mac terpantas untuknya di sini ialah M5 Ultra dengan 96 GB, kira-kira 79–141 token sesaat (4-bit). Mac terkecil yang menjalankannya, dengan 96 GB, mencapai kira-kira 79–141 pada M5 Ultra.
Mengapakah GLM-4.5 Air berjalan lebih pantas daripada saiznya?
Ia model mixture-of-experts: ia menyimpan 106B parameter dalam memori tetapi hanya membaca 12B bagi setiap token, jadi ia menulis sepantas model yang jauh lebih kecil.

Model serupa

Semua model · Semua Mac · Bandingkan Mac anda

Untuk kad model atau README anda

Runs on a Mac: GLM-4.5 Air Menunjukkan Mac terkecil yang menjalankan GLM-4.5 Air dengan baik dan memaut ke sini.

[![Runs on a Mac](https://mlx.app/badge/run/glm-4.5-air.svg)](https://mlx.app/run/glm-4.5-air)

Cara ia dikira

Memori: parameter model pada 8, 6, 4, 3 atau 2 bit setiap pemberat serta skala kumpulan MLX (setengah bit setiap pemberat), atau format aslinya, dengan ruang untuk konteks di atasnya. Secara lalai macOS membenarkan GPU menggunakan kira-kira 75% memori bersatu. Kelajuan: lebar jalur memori dibahagikan dengan bait yang dibaca bagi setiap token ialah had atas untuk satu perbualan; dalam penanda aras Apple Silicon awam llama.cpp, larian sebenar mencapai kira-kira 45% hingga 80% daripadanya, dan julat itulah yang ditunjukkan. Ini anggaran, bukan ukuran: ukur Mac anda sendiri di MLX Bench. Angka model daripada kad model rasmi setiap model, angka cip daripada Spesifikasi Teknikal Apple. Disemak 2026-10-19. Data yang sama seperti mlx.app/compare.

Bolehkah Mac jalankan GLM-4.5 Air? RAM, kelajuan