દરેક પ્રિસિઝન પર મેમરી
| વર્ઝન | વેઇટ | કૉન્ટેક્સ્ટ સાથે | સૌથી નાનું Mac |
|---|---|---|---|
| 8-બિટ | 130 GB | 140 GB | 192 GB |
| 6-બિટ | 99.1 GB | 107 GB | 192 GB |
| 4-બિટ | 68.6 GB | 74.1 GB | 128 GB |
| 3-બિટ ઓછી ગુણવત્તા | 53.4 GB | 57.7 GB | 96 GB |
| 2-બિટ ઓછી ગુણવત્તા | 38.1 GB | 41.1 GB | 64 GB |
દરેક Apple ચિપ પર
દરેક ચિપની Ornith 1.5 122B ચલાવતી સૌથી નાની મેમરી સાઇઝ, તેમાં સમાતું શ્રેષ્ઠ વર્ઝન, અને લખવાની અપેક્ષિત ઝડપ.
| ચિપ | જરૂર | વર્ઝન | ટોકન/સેકન્ડ |
|---|---|---|---|
| M6 | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
| M5 Ultra | 256 GB | 8-બિટ સારું ચાલે છે | 51–91 |
| M5 Max | 128 GB | 4-બિટ સારું ચાલે છે | 49–88 |
| M5 Pro | 64 GB | 2-બિટ સારું ચાલે છે | 45–79 |
| M5 | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
| M4 Max | 128 GB | 4-બિટ સારું ચાલે છે | 44–78 |
| M4 Pro | 64 GB | 2-બિટ સારું ચાલે છે | 40–70 |
| M4 | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
| M3 Ultra | 256 GB | 8-બિટ સારું ચાલે છે | 35–62 |
| M3 Max | 128 GB | 4-બિટ સારું ચાલે છે | 32–57 |
| M3 Pro | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
| M3 | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
| M2 Ultra | 128 GB | 4-બિટ સારું ચાલે છે | 64–114 |
| M2 Max | 64 GB | 2-બિટ સારું ચાલે છે | 58–103 |
| M2 Pro | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
| M2 | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
| M1 Ultra | 128 GB | 4-બિટ સારું ચાલે છે | 64–114 |
| M1 Max | 64 GB | 2-બિટ સારું ચાલે છે | 58–103 |
| M1 Pro | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
| M1 | કોઈ સાઇઝ સમાતી નથી | બહુ મોટું | – |
તેને કેવી રીતે ચલાવવું
- સરળ રીત: MLX Harness ડાઉનલોડ કરો, જે મફત અને ઓપન સોર્સ છે. Ornith 1.5 122B શોધો, તમારા Macમાં સમાતું વર્ઝન ડાઉનલોડ કરો, અને ચૅટ કરો. તે OpenAI-compatible API દ્વારા આ મૉડલ તમારી બીજી ઍપને પણ આપે છે.MLX Harness ડાઉનલોડ કરોમફત · Apple Silicon · macOS 14.5 કે પછીનું
- Terminalમાં Appleના MLX સાથે: હજી કોઈ કમ્યુનિટી MLX બિલ્ડ નથી, એટલે સત્તાવાર વેઇટમાંથી જાતે બનાવો:
pip install mlx-lmmlx_lm.convert --hf-path ornith-ai/Ornith-1.5-122B -q
સ્ટેપ બાય સ્ટેપ: Mac પર LLM ડાઉનલોડ કરો અને ચલાવો · MLX Harness કેવી રીતે વાપરવું · MLX વિ. Ollama વિ. llama.cpp
Ornith 1.5 122B વિશે
| બનાવનાર | Ornith AI |
|---|---|
| પૅરામીટર | 122B કુલ · 10B સક્રિય (mixture of experts) |
| કૉન્ટેક્સ્ટ | 256K ટોકન |
| લાઇસન્સ | MIT |
| રિલીઝ | 2026-10 |
| ઇનપુટ | ટેક્સ્ટ અને ઇમેજ |
| વેઇટ | ornith-ai/Ornith-1.5-122B |
પ્રશ્નો
- Ornith 1.5 122Bને કેટલી મેમરી જોઈએ?
- 4-બિટ પર આશરે 68.6 GB વેઇટ, ઉપરાંત કૉન્ટેક્સ્ટ માટે જગ્યા: કુલ 74.1 GB. Mac પર એનો અર્થ 128 GB કે વધુ યુનિફાઇડ મેમરી, કારણ કે ડિફૉલ્ટ રીતે macOS GPUને તેનો આશરે 75% ભાગ વાપરવા દે છે.
- Mac પર Ornith 1.5 122B કેટલું ઝડપી ચાલે છે?
- લખવાની ઝડપ મેમરી બૅન્ડવિડ્થ પર આધાર રાખે છે. અહીં તેના માટે સૌથી ઝડપી Mac 128 GBવાળું M2 Ultra છે, સેકન્ડના આશરે 64–114 ટોકન (4-બિટ). તેને ચલાવતું સૌથી નાનું Mac, 128 GBવાળું M2 Ultra, આશરે 64–114 સુધી પહોંચે છે.
- Ornith 1.5 122B તેની સાઇઝના પ્રમાણમાં ઝડપી કેમ ચાલે છે?
- તે mixture-of-experts મૉડલ છે: તે મેમરીમાં 122B પૅરામીટર રાખે છે, પણ દરેક ટોકન માટે ફક્ત 10B વાંચે છે, એટલે તે ઘણા નાના મૉડલની ઝડપે લખે છે.
મળતાં આવતાં મૉડલ
તમારા મૉડલ કાર્ડ કે README માટે
Ornith 1.5 122Bને સારી રીતે ચલાવતું સૌથી નાનું Mac બતાવે છે અને અહીં લિંક કરે છે.
[](https://mlx.app/run/ornith-1.5-122b)ગણતરી કેવી રીતે થઈ
મેમરી: મૉડલના પૅરામીટર પ્રતિ વેઇટ 8, 6, 4, 3 કે 2 બિટ પર, ઉપરાંત MLXના ગ્રુપ સ્કેલ (પ્રતિ વેઇટ અડધો બિટ), અથવા તેનું નેટિવ ફૉર્મેટ, અને ઉપરથી કૉન્ટેક્સ્ટ માટે જગ્યા. ડિફૉલ્ટ રીતે macOS GPUને યુનિફાઇડ મેમરીનો આશરે 75% ભાગ વાપરવા દે છે. ઝડપ: મેમરી બૅન્ડવિડ્થને દરેક ટોકન માટે વંચાતા બાઇટથી ભાગતાં એક વાતચીતની ઉપલી મર્યાદા મળે છે; llama.cppના જાહેર Apple Silicon બેન્ચમાર્કમાં ખરા રન તેના આશરે 45%થી 80% સુધી પહોંચે છે, અને એ જ રેન્જ બતાવી છે. આ અંદાજ છે, માપ નથી: તમારું Mac MLX Bench પર માપો. મૉડલના આંકડા દરેક સત્તાવાર મૉડલ કાર્ડમાંથી, ચિપના આંકડા Appleના Tech Specsમાંથી. 2026-10-19ના રોજ ચકાસ્યું. mlx.app/compare જેવો જ ડેટા.