Mac-இல் Llama 4 Maverick 17B-128E Instruct இயங்குமா?

ஆம், 512 GB அல்லது அதற்கு மேல் யூனிஃபைடு மெமரி இருந்தால். Llama 4 Maverick 17B-128E Instruct-இல் 400B பாராமீட்டர்கள் உள்ளன, அவற்றில் ஒவ்வொரு டோக்கனுக்கும் 17B செயலில் இருக்கும்; ஒவ்வொரு பிரிசிஷனிலும் இதற்குத் தேவையான மெமரியையும், ஒவ்வொரு Apple சிப்பும் இதை எவ்வளவு வேகமாக இயக்கும் என்பதையும் இங்கே பாருங்கள்.

4-பிட்-இல் மெமரி243 GBவெயிட்கள் 225 GB + கான்டெக்ஸ்ட்
மிகச் சிறிய Mac512 GB6-பிட் · 5 Mac கட்டமைப்புகள்
மிக வேகமான Mac39–70டோக்கன்கள்/வினாடி · M5 Ultra 512 GB (மதிப்பீடு)

ஒவ்வொரு பிரிசிஷனிலும் மெமரி

பதிப்புவெயிட்கள்கான்டெக்ஸ்ட்டுடன்மிகச் சிறிய Mac
8-பிட்425 GB459 GBஎந்த Mac-ஐ விடவும் அதிகம்
6-பிட்325 GB351 GB512 GB
4-பிட்225 GB243 GB512 GB
3-பிட் குறைந்த தரம்175 GB189 GB256 GB
2-பிட் குறைந்த தரம்125 GB135 GB192 GB

ஒவ்வொரு Apple சிப்பிலும்

Llama 4 Maverick 17B-128E Instruct-ஐ இயக்கும் ஒவ்வொரு சிப்பின் மிகச் சிறிய மெமரி அளவு, அதில் பொருந்தும் சிறந்த பதிப்பு, எதிர்பார்க்கக்கூடிய எழுதும் வேகம்.

சிப்தேவைபதிப்புடோக்கன்கள்/வினாடி
M6எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5 Ultra512 GB6-பிட் நன்றாக இயங்கும்39–70
M5 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3 Ultra512 GB6-பிட் நன்றாக இயங்கும்27–47
M3 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2 Ultra192 GB2-பிட் நன்றாக இயங்கும்68–121
M2 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Ultraஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1எந்த அளவும் பொருந்தாதுமிகப் பெரியது–

இதை எப்படி இயக்குவது

  1. எளிய வழி: இலவசமான, ஓப்பன் சோர்ஸ் MLX Harness-ஐப் பதிவிறக்குங்கள். Llama 4 Maverick 17B-128E Instruct-ஐத் தேடி, உங்கள் Mac-இல் பொருந்தும் பதிப்பைப் பதிவிறக்கி, சாட் செய்யுங்கள். இது OpenAI-compatible API வழியாக அந்த மாடலை உங்கள் மற்ற ஆப்களுக்கும் வழங்குகிறது.MLX Harness-ஐப் பதிவிறக்குங்கள்இலவசம் · Apple Silicon · macOS 14.5 அல்லது அதற்குப் பிந்தையது
  2. Terminal-இல் Apple-இன் MLX உடன்:pip install mlx-lmmlx_lm.chat --model mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bitபில்ட்: Hugging Face-இல் mlx-community/Llama-4-Maverick-17B-128E-Instruct-4bit. மற்ற பிரிசிஷன்கள் அதன் அருகிலேயே உள்ளன.

படிப்படியாக: Mac-இல் LLM-களைப் பதிவிறக்கி இயக்குங்கள் · MLX Harness-வை எப்படிப் பயன்படுத்துவது · MLX vs Ollama vs llama.cpp

Llama 4 Maverick 17B-128E Instruct பற்றி

உருவாக்கியவர்Meta
பாராமீட்டர்கள்மொத்தம் 400B · செயலில் 17B (mixture of experts)
கான்டெக்ஸ்ட்1M டோக்கன்கள்
உரிமம்Llama 4 Community License
வெளியீடு2025-04
உள்ளீடுஉரை, படங்கள்
இன்டெலிஜென்ஸ்Artificial Analysis Intelligence Index-இல் 9.3
வெயிட்கள்meta-llama/Llama-4-Maverick-17B-128E-Instruct

கேள்விகள்

Llama 4 Maverick 17B-128E Instruct-க்கு எவ்வளவு மெமரி தேவை?
4-பிட்-இல் சுமார் 225 GB வெயிட்கள், கூடவே கான்டெக்ஸ்ட்டுக்கு இடம்: மொத்தம் 243 GB. Mac-இல் இதன் பொருள் 512 GB அல்லது அதற்கு மேல் யூனிஃபைடு மெமரி, ஏனெனில் இயல்பாக macOS அதில் சுமார் 75%-ஐ மட்டுமே GPU பயன்படுத்த அனுமதிக்கிறது.
Mac-இல் Llama 4 Maverick 17B-128E Instruct எவ்வளவு வேகமாக இயங்கும்?
எழுதும் வேகம் மெமரி பேண்ட்வித்தைப் பொறுத்தது. இங்கே இதற்கு மிக வேகமான Mac 512 GB கொண்ட M5 Ultra, வினாடிக்கு சுமார் 39–70 டோக்கன்கள் (6-பிட்). இதை இயக்கும் மிகச் சிறிய Mac, 512 GB கொண்ட M5 Ultra, சுமார் 39–70 வரை எட்டும்.
Llama 4 Maverick 17B-128E Instruct அதன் அளவை விட ஏன் வேகமாக இயங்குகிறது?
இது ஒரு mixture-of-experts மாடல்: மெமரியில் 400B பாராமீட்டர்களை வைத்திருந்தாலும், ஒவ்வொரு டோக்கனுக்கும் 17B மட்டுமே படிக்கிறது, அதனால் மிகச் சிறிய மாடலின் வேகத்தில் எழுதுகிறது.

இதே போன்ற மாடல்கள்

எல்லா மாடல்களும் · எல்லா Mac-களும் · உங்கள் Mac-ஐ ஒப்பிடுங்கள்

உங்கள் மாடல் கார்டு அல்லது README-க்கு

Runs on a Mac: Llama 4 Maverick 17B-128E Instruct Llama 4 Maverick 17B-128E Instruct-ஐ நன்றாக இயக்கும் மிகச் சிறிய Mac-ஐக் காட்டி, இங்கே இணைப்பு தருகிறது.

[![Runs on a Mac](https://mlx.app/badge/run/llama-4-maverick.svg)](https://mlx.app/run/llama-4-maverick)

எப்படிக் கணக்கிடப்பட்டது

மெமரி: மாடலின் பாராமீட்டர்கள் ஒரு வெயிட்டுக்கு 8, 6, 4, 3 அல்லது 2 பிட்களில், கூடவே MLX-இன் குரூப் ஸ்கேல்கள் (ஒரு வெயிட்டுக்கு அரை பிட்), அல்லது அதன் நேட்டிவ் வடிவம், அதற்கு மேல் கான்டெக்ஸ்ட்டுக்கு இடம். இயல்பாக macOS, யூனிஃபைடு மெமரியில் சுமார் 75%-ஐ GPU பயன்படுத்த அனுமதிக்கிறது. வேகம்: மெமரி பேண்ட்வித்தை ஒவ்வொரு டோக்கனுக்கும் படிக்கப்படும் பைட்டுகளால் வகுத்தால், ஒரு உரையாடலுக்கான உச்சவரம்பு கிடைக்கும்; llama.cpp-இன் பொது Apple Silicon பெஞ்ச்மார்க்குகளில் உண்மையான ரன்கள் அதில் சுமார் 45% முதல் 80% வரை எட்டுகின்றன, அந்த வரம்பே காட்டப்படுகிறது. இவை மதிப்பீடுகள், அளவீடுகள் அல்ல: உங்கள் சொந்த Mac-ஐ MLX Bench-இல் அளந்து பாருங்கள். மாடல் விவரங்கள் ஒவ்வொரு அதிகாரப்பூர்வ மாடல் கார்டிலிருந்தும், சிப் விவரங்கள் Apple-இன் Tech Specs-இலிருந்தும். சரிபார்த்தது 2026-10-19. mlx.app/compare-இல் உள்ள அதே தரவு.

Mac-இல் Llama 4 Maverick 17B-128E Instruct இயங்குமா? மெமரி, வேகம்