Mac-இல் Qwen3.5 397B A17B இயங்குமா?

ஆம், 512 GB அல்லது அதற்கு மேல் யூனிஃபைடு மெமரி இருந்தால். Qwen3.5 397B A17B-இல் 397B பாராமீட்டர்கள் உள்ளன, அவற்றில் ஒவ்வொரு டோக்கனுக்கும் 17B செயலில் இருக்கும்; ஒவ்வொரு பிரிசிஷனிலும் இதற்குத் தேவையான மெமரியையும், ஒவ்வொரு Apple சிப்பும் இதை எவ்வளவு வேகமாக இயக்கும் என்பதையும் இங்கே பாருங்கள்.

4-பிட்-இல் மெமரி241 GBவெயிட்கள் 223 GB + கான்டெக்ஸ்ட்
மிகச் சிறிய Mac512 GB6-பிட் · 5 Mac கட்டமைப்புகள்
மிக வேகமான Mac39–70டோக்கன்கள்/வினாடி · M5 Ultra 512 GB (மதிப்பீடு)

ஒவ்வொரு பிரிசிஷனிலும் மெமரி

பதிப்புவெயிட்கள்கான்டெக்ஸ்ட்டுடன்மிகச் சிறிய Mac
8-பிட்422 GB456 GBஎந்த Mac-ஐ விடவும் அதிகம்
6-பிட்323 GB348 GB512 GB
4-பிட்223 GB241 GB512 GB
3-பிட் குறைந்த தரம்174 GB188 GB256 GB
2-பிட் குறைந்த தரம்124 GB134 GB192 GB

ஒவ்வொரு Apple சிப்பிலும்

Qwen3.5 397B A17B-ஐ இயக்கும் ஒவ்வொரு சிப்பின் மிகச் சிறிய மெமரி அளவு, அதில் பொருந்தும் சிறந்த பதிப்பு, எதிர்பார்க்கக்கூடிய எழுதும் வேகம்.

சிப்தேவைபதிப்புடோக்கன்கள்/வினாடி
M6எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5 Ultra512 GB6-பிட் நன்றாக இயங்கும்39–70
M5 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3 Ultra512 GB6-பிட் நன்றாக இயங்கும்27–47
M3 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2 Ultra192 GB2-பிட் நன்றாக இயங்கும்68–121
M2 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Ultraஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1எந்த அளவும் பொருந்தாதுமிகப் பெரியது–

இதை எப்படி இயக்குவது

  1. எளிய வழி: இலவசமான, ஓப்பன் சோர்ஸ் MLX Harness-ஐப் பதிவிறக்குங்கள். Qwen3.5 397B A17B-ஐத் தேடி, உங்கள் Mac-இல் பொருந்தும் பதிப்பைப் பதிவிறக்கி, சாட் செய்யுங்கள். இது OpenAI-compatible API வழியாக அந்த மாடலை உங்கள் மற்ற ஆப்களுக்கும் வழங்குகிறது.MLX Harness-ஐப் பதிவிறக்குங்கள்இலவசம் · Apple Silicon · macOS 14.5 அல்லது அதற்குப் பிந்தையது
  2. Terminal-இல் Apple-இன் MLX உடன்:pip install mlx-lmmlx_lm.chat --model mlx-community/Qwen3.5-397B-A17B-4bitபில்ட்: Hugging Face-இல் mlx-community/Qwen3.5-397B-A17B-4bit. மற்ற பிரிசிஷன்கள் அதன் அருகிலேயே உள்ளன.

படிப்படியாக: Mac-இல் LLM-களைப் பதிவிறக்கி இயக்குங்கள் · MLX Harness-வை எப்படிப் பயன்படுத்துவது · MLX vs Ollama vs llama.cpp

Qwen3.5 397B A17B பற்றி

உருவாக்கியவர்Qwen (Alibaba)
பாராமீட்டர்கள்மொத்தம் 397B · செயலில் 17B (mixture of experts)
கான்டெக்ஸ்ட்256K டோக்கன்கள்
உரிமம்Apache-2.0
வெளியீடு2026-02
உள்ளீடுஉரை, படங்கள்
இன்டெலிஜென்ஸ்Artificial Analysis Intelligence Index-இல் 18.4
வெயிட்கள்Qwen/Qwen3.5-397B-A17B

கேள்விகள்

Qwen3.5 397B A17B-க்கு எவ்வளவு மெமரி தேவை?
4-பிட்-இல் சுமார் 223 GB வெயிட்கள், கூடவே கான்டெக்ஸ்ட்டுக்கு இடம்: மொத்தம் 241 GB. Mac-இல் இதன் பொருள் 512 GB அல்லது அதற்கு மேல் யூனிஃபைடு மெமரி, ஏனெனில் இயல்பாக macOS அதில் சுமார் 75%-ஐ மட்டுமே GPU பயன்படுத்த அனுமதிக்கிறது.
Mac-இல் Qwen3.5 397B A17B எவ்வளவு வேகமாக இயங்கும்?
எழுதும் வேகம் மெமரி பேண்ட்வித்தைப் பொறுத்தது. இங்கே இதற்கு மிக வேகமான Mac 512 GB கொண்ட M5 Ultra, வினாடிக்கு சுமார் 39–70 டோக்கன்கள் (6-பிட்). இதை இயக்கும் மிகச் சிறிய Mac, 512 GB கொண்ட M5 Ultra, சுமார் 39–70 வரை எட்டும்.
Qwen3.5 397B A17B அதன் அளவை விட ஏன் வேகமாக இயங்குகிறது?
இது ஒரு mixture-of-experts மாடல்: மெமரியில் 397B பாராமீட்டர்களை வைத்திருந்தாலும், ஒவ்வொரு டோக்கனுக்கும் 17B மட்டுமே படிக்கிறது, அதனால் மிகச் சிறிய மாடலின் வேகத்தில் எழுதுகிறது.

இதே போன்ற மாடல்கள்

எல்லா மாடல்களும் · எல்லா Mac-களும் · உங்கள் Mac-ஐ ஒப்பிடுங்கள்

உங்கள் மாடல் கார்டு அல்லது README-க்கு

Runs on a Mac: Qwen3.5 397B A17B Qwen3.5 397B A17B-ஐ நன்றாக இயக்கும் மிகச் சிறிய Mac-ஐக் காட்டி, இங்கே இணைப்பு தருகிறது.

[![Runs on a Mac](https://mlx.app/badge/run/qwen3.5-397b-a17b.svg)](https://mlx.app/run/qwen3.5-397b-a17b)

எப்படிக் கணக்கிடப்பட்டது

மெமரி: மாடலின் பாராமீட்டர்கள் ஒரு வெயிட்டுக்கு 8, 6, 4, 3 அல்லது 2 பிட்களில், கூடவே MLX-இன் குரூப் ஸ்கேல்கள் (ஒரு வெயிட்டுக்கு அரை பிட்), அல்லது அதன் நேட்டிவ் வடிவம், அதற்கு மேல் கான்டெக்ஸ்ட்டுக்கு இடம். இயல்பாக macOS, யூனிஃபைடு மெமரியில் சுமார் 75%-ஐ GPU பயன்படுத்த அனுமதிக்கிறது. வேகம்: மெமரி பேண்ட்வித்தை ஒவ்வொரு டோக்கனுக்கும் படிக்கப்படும் பைட்டுகளால் வகுத்தால், ஒரு உரையாடலுக்கான உச்சவரம்பு கிடைக்கும்; llama.cpp-இன் பொது Apple Silicon பெஞ்ச்மார்க்குகளில் உண்மையான ரன்கள் அதில் சுமார் 45% முதல் 80% வரை எட்டுகின்றன, அந்த வரம்பே காட்டப்படுகிறது. இவை மதிப்பீடுகள், அளவீடுகள் அல்ல: உங்கள் சொந்த Mac-ஐ MLX Bench-இல் அளந்து பாருங்கள். மாடல் விவரங்கள் ஒவ்வொரு அதிகாரப்பூர்வ மாடல் கார்டிலிருந்தும், சிப் விவரங்கள் Apple-இன் Tech Specs-இலிருந்தும். சரிபார்த்தது 2026-10-19. mlx.app/compare-இல் உள்ள அதே தரவு.

Mac-இல் Qwen3.5 397B A17B இயங்குமா? மெமரி, வேகம்