प्रत्येक प्रिसिजनला मेमरी
| आवृत्ती | वेट | कॉन्टेक्स्टसह | सर्वात लहान Mac |
|---|---|---|---|
| नेटिव्ह 4.25-बिट | 1.6 TB | 1.7 TB | कोणत्याही Mac पेक्षा जास्त |
| 3-बिट कमी गुणवत्ता | 1.2 TB | 1.3 TB | कोणत्याही Mac पेक्षा जास्त |
| 2-बिट कमी गुणवत्ता | 875 GB | 945 GB | कोणत्याही Mac पेक्षा जास्त |
प्रत्येक Apple चिपवर
प्रत्येक चिपचा Kimi K3 चालवणारा सर्वात लहान मेमरी आकार, त्यात बसणारी सर्वोत्तम आवृत्ती, आणि अपेक्षित लिहिण्याचा वेग.
| चिप | लागते | आवृत्ती | टोकन/सेकंद |
|---|---|---|---|
| M6 | कोणताही आकार बसत नाही | खूप मोठे | – |
| M5 Ultra | कोणताही आकार बसत नाही | खूप मोठे | – |
| M5 Max | कोणताही आकार बसत नाही | खूप मोठे | – |
| M5 Pro | कोणताही आकार बसत नाही | खूप मोठे | – |
| M5 | कोणताही आकार बसत नाही | खूप मोठे | – |
| M4 Max | कोणताही आकार बसत नाही | खूप मोठे | – |
| M4 Pro | कोणताही आकार बसत नाही | खूप मोठे | – |
| M4 | कोणताही आकार बसत नाही | खूप मोठे | – |
| M3 Ultra | कोणताही आकार बसत नाही | खूप मोठे | – |
| M3 Max | कोणताही आकार बसत नाही | खूप मोठे | – |
| M3 Pro | कोणताही आकार बसत नाही | खूप मोठे | – |
| M3 | कोणताही आकार बसत नाही | खूप मोठे | – |
| M2 Ultra | कोणताही आकार बसत नाही | खूप मोठे | – |
| M2 Max | कोणताही आकार बसत नाही | खूप मोठे | – |
| M2 Pro | कोणताही आकार बसत नाही | खूप मोठे | – |
| M2 | कोणताही आकार बसत नाही | खूप मोठे | – |
| M1 Ultra | कोणताही आकार बसत नाही | खूप मोठे | – |
| M1 Max | कोणताही आकार बसत नाही | खूप मोठे | – |
| M1 Pro | कोणताही आकार बसत नाही | खूप मोठे | – |
| M1 | कोणताही आकार बसत नाही | खूप मोठे | – |
ते कसे चालवायचे
कोणताही एक Mac ते सामावू शकत नाही. खालची लहान मॉडेल चांगली चालतात, आणि Mac क्लस्टरचे मार्गदर्शन एक मॉडेल अनेक Mac वर कसे विभागायचे ते सांगते.
टप्प्याटप्प्याने: Mac वर LLM डाउनलोड करा आणि चालवा · MLX Harness कसे वापरायचे · MLX विरुद्ध Ollama विरुद्ध llama.cpp
Kimi K3 बद्दल
| निर्माते | Moonshot AI |
|---|---|
| पॅरामीटर | 2,800B एकूण · 104B सक्रिय (mixture of experts) |
| कॉन्टेक्स्ट | 1M टोकन |
| परवाना | Kimi K3 License (custom) |
| प्रकाशित | 2026-06 |
| इनपुट | मजकूर आणि प्रतिमा |
| इंटेलिजन्स | Artificial Analysis Intelligence Index वर 43.6 |
| वेट | moonshotai/Kimi-K3 |
प्रश्न
- Kimi K3 ला किती मेमरी लागते?
- नेटिव्ह 4.25-बिट ला सुमारे 1.6 TB वेट, शिवाय कॉन्टेक्स्टसाठी जागा: एकूण 1.7 TB. आज कोणत्याही Mac कडे इतकी मेमरी नाही.
- कोणताही Mac Kimi K3 चालवू शकतो का?
- एकटा नाही: 2 बिटलाही त्याला सर्वात मोठ्या Mac पेक्षा जास्त मेमरी लागते. लहान मॉडेल वापरा, किंवा क्लस्टर रनटाइमने ते अनेक Mac वर विभागा.
- Kimi K3 त्याच्या आकाराच्या मानाने वेगाने का चालते?
- हे mixture-of-experts मॉडेल आहे: ते मेमरीत 2,800B पॅरामीटर ठेवते, पण प्रत्येक टोकनसाठी फक्त 104B वाचते, त्यामुळे ते खूप लहान मॉडेलच्या वेगाने लिहिते.
तत्सम मॉडेल
तुमच्या मॉडेल कार्ड किंवा README साठी
Kimi K3 चांगले चालवणारा सर्वात लहान Mac दाखवते आणि इथे लिंक करते.
[](https://mlx.app/run/kimi-k3)हिशोब कसा केला
मेमरी: मॉडेलचे पॅरामीटर प्रति वेट 8, 6, 4, 3 किंवा 2 बिटला, शिवाय MLX चे ग्रुप स्केल (प्रति वेट अर्धा बिट), किंवा त्याचा नेटिव्ह फॉरमॅट, आणि वर कॉन्टेक्स्टसाठी जागा. डिफॉल्टनुसार macOS GPU ला युनिफाइड मेमरीपैकी सुमारे 75% वापरू देते. वेग: मेमरी बँडविड्थला प्रत्येक टोकनसाठी वाचल्या जाणाऱ्या बाइटने भागल्यास एका संभाषणाची कमाल मर्यादा मिळते; llama.cpp च्या सार्वजनिक Apple Silicon बेंचमार्क मध्ये प्रत्यक्ष रन त्याच्या सुमारे 45% ते 80% पर्यंत पोहोचतात, आणि हीच रेंज दाखवली आहे. हे अंदाज आहेत, मोजमाप नाही: तुमचा Mac MLX Bench वर मोजा. मॉडेलचे आकडे प्रत्येक अधिकृत मॉडेल कार्डमधून, चिपचे आकडे Apple च्या Tech Specs मधून. 2026-10-19 रोजी तपासले. mlx.app/compare वरचाच डेटा.