Kaya bang patakbuhin ng Mac ang Kimi K2.6?

Oo, kung may 512 GB na unified memory o higit pa. May 1,000B na parameter ang Kimi K2.6, 32B dito ang aktibo sa bawat token; narito ang memory na kailangan nito sa bawat precision at kung gaano ito kabilis sa bawat Apple chip.

Memory sa native na 4-bit643 GBweights 595 GB + context
Pinakamaliit na Mac512 GB2-bit · 2 configuration ng Mac
Pinakamabilis na Mac54–96token/s · M5 Ultra 512 GB (tantiya)

Memory sa bawat precision

BersyonWeightsKasama ang contextPinakamaliit na Mac
native na 4-bit595 GB643 GBhigit sa anumang Mac
3-bit mas mababang kalidad438 GB473 GBhigit sa anumang Mac
2-bit mas mababang kalidad313 GB338 GB512 GB

Sa bawat Apple chip

Ang pinakamaliit na memory size ng bawat chip na kaya ang Kimi K2.6, ang pinakamagandang bersyong kasya rito, at ang bilis ng pagsusulat na maaasahan mo.

ChipKailanganBersyonToken/s
M6walang kasyang sizeMasyadong malaki–
M5 Ultra512 GB2-bit Maayos54–96
M5 Maxwalang kasyang sizeMasyadong malaki–
M5 Prowalang kasyang sizeMasyadong malaki–
M5walang kasyang sizeMasyadong malaki–
M4 Maxwalang kasyang sizeMasyadong malaki–
M4 Prowalang kasyang sizeMasyadong malaki–
M4walang kasyang sizeMasyadong malaki–
M3 Ultra512 GB2-bit Maayos37–66
M3 Maxwalang kasyang sizeMasyadong malaki–
M3 Prowalang kasyang sizeMasyadong malaki–
M3walang kasyang sizeMasyadong malaki–
M2 Ultrawalang kasyang sizeMasyadong malaki–
M2 Maxwalang kasyang sizeMasyadong malaki–
M2 Prowalang kasyang sizeMasyadong malaki–
M2walang kasyang sizeMasyadong malaki–
M1 Ultrawalang kasyang sizeMasyadong malaki–
M1 Maxwalang kasyang sizeMasyadong malaki–
M1 Prowalang kasyang sizeMasyadong malaki–
M1walang kasyang sizeMasyadong malaki–

Paano ito patakbuhin

  1. Ang madaling paraan: i-download ang MLX Harness, libre at open source. Hanapin ang Kimi K2.6, i-download ang bersyong kasya sa Mac mo, at mag-chat. Ibinibigay rin nito ang model sa iba mo pang app sa pamamagitan ng API na compatible sa OpenAI.I-download ang MLX HarnessLibre · Apple Silicon · macOS 14.5 o mas bago
  2. Sa Terminal gamit ang MLX ng Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/Kimi-K2.6-mlx-DQ3_K_M-q8Build: mlx-community/Kimi-K2.6-mlx-DQ3_K_M-q8 sa Hugging Face. Katabi nito ang ibang precision.

Hakbang-hakbang: mag-download at magpatakbo ng LLM sa Mac · paano gamitin ang MLX Harness · MLX vs Ollama vs llama.cpp

Tungkol sa Kimi K2.6

Gawa ngMoonshot AI
Mga parameter1,000B kabuuan · 32B aktibo (mixture of experts)
Context256K token
LisensyaModified MIT
Inilabas2026-04
InputText at larawan
Weightsmoonshotai/Kimi-K2.6

Mga tanong

Gaano karaming memory ang kailangan ng Kimi K2.6?
Mga 595 GB ng weights sa native na 4-bit, dagdag ang espasyo para sa context: 643 GB lahat-lahat. Mas malaki iyon kaysa sa memory ng anumang Mac ngayon.
Gaano kabilis ang Kimi K2.6 sa Mac?
Nakadepende sa memory bandwidth ang bilis ng pagsusulat. Ang pinakamabilis na Mac para dito ay M5 Ultra na may 512 GB, sa mga 54–96 token bawat segundo (2-bit). Ang pinakamaliit na Mac na kaya ito, na may 512 GB, ay umaabot sa mga 54–96 sa M5 Ultra.
Bakit mas mabilis ang Kimi K2.6 kaysa sa inaasahan sa laki nito?
Isa itong mixture-of-experts na model: may 1,000B na parameter ito sa memory pero 32B lang ang binabasa nito sa bawat token, kaya nagsusulat ito sa bilis ng mas maliit na model.

Mga katulad na model

Bawat model · Bawat Mac · Ihambing ang Mac mo

Para sa model card o README mo

Runs on a Mac: Kimi K2.6 Ipinapakita ang pinakamaliit na Mac na maayos na nagpapatakbo ng Kimi K2.6 at nagli-link dito.

[![Runs on a Mac](https://mlx.app/badge/run/kimi-k2.6.svg)](https://mlx.app/run/kimi-k2.6)

Paano ito kinuwenta

Memory: ang mga parameter ng model sa 8, 6, 4, 3 o 2 bit kada weight dagdag ang group scales ng MLX (kalahating bit kada weight), o ang native format nito, at may espasyo pa para sa context. Bilang default, mga 75% ng unified memory ang ipinapagamit ng macOS sa GPU. Bilis: ang memory bandwidth na hinati sa mga byte na binabasa kada token ang pinakamataas na posible para sa isang usapan; sa mga pampublikong benchmark ng llama.cpp sa Apple Silicon, umaabot ang totoong takbo sa mga 45% hanggang 80% nito, at iyon ang range na ipinapakita. Mga tantiya ito, hindi sukat: sukatin ang sarili mong Mac sa MLX Bench. Ang mga numero ng model ay mula sa opisyal na model card ng bawat isa, at ang sa chip ay mula sa Tech Specs ng Apple. Sinuri noong 2026-10-19. Parehong data ng mlx.app/compare.

Kaya ba ng Mac ang Kimi K2.6? Memory at bilis