Mac-இல் Mistral Large 3 (675B) இயங்குமா?

ஆம், 512 GB அல்லது அதற்கு மேல் யூனிஃபைடு மெமரி இருந்தால். Mistral Large 3 (675B)-இல் 675B பாராமீட்டர்கள் உள்ளன, அவற்றில் ஒவ்வொரு டோக்கனுக்கும் 41B செயலில் இருக்கும்; ஒவ்வொரு பிரிசிஷனிலும் இதற்குத் தேவையான மெமரியையும், ஒவ்வொரு Apple சிப்பும் இதை எவ்வளவு வேகமாக இயக்கும் என்பதையும் இங்கே பாருங்கள்.

4-பிட்-இல் மெமரி410 GBவெயிட்கள் 380 GB + கான்டெக்ஸ்ட்
மிகச் சிறிய Mac512 GB3-பிட் · 2 Mac கட்டமைப்புகள்
மிக வேகமான Mac30–54டோக்கன்கள்/வினாடி · M5 Ultra 512 GB (மதிப்பீடு)

ஒவ்வொரு பிரிசிஷனிலும் மெமரி

பதிப்புவெயிட்கள்கான்டெக்ஸ்ட்டுடன்மிகச் சிறிய Mac
8-பிட்717 GB775 GBஎந்த Mac-ஐ விடவும் அதிகம்
6-பிட்548 GB592 GBஎந்த Mac-ஐ விடவும் அதிகம்
4-பிட்380 GB410 GBஎந்த Mac-ஐ விடவும் அதிகம்
3-பிட் குறைந்த தரம்295 GB319 GB512 GB
2-பிட் குறைந்த தரம்211 GB228 GB512 GB

ஒவ்வொரு Apple சிப்பிலும்

Mistral Large 3 (675B)-ஐ இயக்கும் ஒவ்வொரு சிப்பின் மிகச் சிறிய மெமரி அளவு, அதில் பொருந்தும் சிறந்த பதிப்பு, எதிர்பார்க்கக்கூடிய எழுதும் வேகம்.

சிப்தேவைபதிப்புடோக்கன்கள்/வினாடி
M6எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5 Ultra512 GB3-பிட் நன்றாக இயங்கும்30–54
M5 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M5எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M4எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3 Ultra512 GB3-பிட் நன்றாக இயங்கும்21–37
M3 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M3எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2 Ultraஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M2எந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Ultraஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Maxஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1 Proஎந்த அளவும் பொருந்தாதுமிகப் பெரியது–
M1எந்த அளவும் பொருந்தாதுமிகப் பெரியது–

இதை எப்படி இயக்குவது

  1. எளிய வழி: இலவசமான, ஓப்பன் சோர்ஸ் MLX Harness-ஐப் பதிவிறக்குங்கள். Mistral Large 3 (675B)-ஐத் தேடி, உங்கள் Mac-இல் பொருந்தும் பதிப்பைப் பதிவிறக்கி, சாட் செய்யுங்கள். இது OpenAI-compatible API வழியாக அந்த மாடலை உங்கள் மற்ற ஆப்களுக்கும் வழங்குகிறது.MLX Harness-ஐப் பதிவிறக்குங்கள்இலவசம் · Apple Silicon · macOS 14.5 அல்லது அதற்குப் பிந்தையது
  2. Terminal-இல் Apple-இன் MLX உடன்:pip install mlx-lmmlx_lm.chat --model mlx-community/Mistral-Large-3-675B-Instruct-2512-mlx-4bitபில்ட்: Hugging Face-இல் mlx-community/Mistral-Large-3-675B-Instruct-2512-mlx-4bit. மற்ற பிரிசிஷன்கள் அதன் அருகிலேயே உள்ளன.

படிப்படியாக: Mac-இல் LLM-களைப் பதிவிறக்கி இயக்குங்கள் · MLX Harness-வை எப்படிப் பயன்படுத்துவது · MLX vs Ollama vs llama.cpp

Mistral Large 3 (675B) பற்றி

உருவாக்கியவர்Mistral AI
பாராமீட்டர்கள்மொத்தம் 675B · செயலில் 41B (mixture of experts)
கான்டெக்ஸ்ட்256K டோக்கன்கள்
உரிமம்Apache-2.0
வெளியீடு2025-11
உள்ளீடுஉரை, படங்கள்
வெயிட்கள்mistralai/Mistral-Large-3-675B-Instruct-2512

கேள்விகள்

Mistral Large 3 (675B)-க்கு எவ்வளவு மெமரி தேவை?
4-பிட்-இல் சுமார் 380 GB வெயிட்கள், கூடவே கான்டெக்ஸ்ட்டுக்கு இடம்: மொத்தம் 410 GB. இன்றுள்ள எந்த Mac-இலும் இவ்வளவு மெமரி இல்லை.
Mac-இல் Mistral Large 3 (675B) எவ்வளவு வேகமாக இயங்கும்?
எழுதும் வேகம் மெமரி பேண்ட்வித்தைப் பொறுத்தது. இங்கே இதற்கு மிக வேகமான Mac 512 GB கொண்ட M5 Ultra, வினாடிக்கு சுமார் 30–54 டோக்கன்கள் (3-பிட்). இதை இயக்கும் மிகச் சிறிய Mac, 512 GB கொண்ட M5 Ultra, சுமார் 30–54 வரை எட்டும்.
Mistral Large 3 (675B) அதன் அளவை விட ஏன் வேகமாக இயங்குகிறது?
இது ஒரு mixture-of-experts மாடல்: மெமரியில் 675B பாராமீட்டர்களை வைத்திருந்தாலும், ஒவ்வொரு டோக்கனுக்கும் 41B மட்டுமே படிக்கிறது, அதனால் மிகச் சிறிய மாடலின் வேகத்தில் எழுதுகிறது.

இதே போன்ற மாடல்கள்

எல்லா மாடல்களும் · எல்லா Mac-களும் · உங்கள் Mac-ஐ ஒப்பிடுங்கள்

உங்கள் மாடல் கார்டு அல்லது README-க்கு

Runs on a Mac: Mistral Large 3 (675B) Mistral Large 3 (675B)-ஐ நன்றாக இயக்கும் மிகச் சிறிய Mac-ஐக் காட்டி, இங்கே இணைப்பு தருகிறது.

[![Runs on a Mac](https://mlx.app/badge/run/mistral-large-3.svg)](https://mlx.app/run/mistral-large-3)

எப்படிக் கணக்கிடப்பட்டது

மெமரி: மாடலின் பாராமீட்டர்கள் ஒரு வெயிட்டுக்கு 8, 6, 4, 3 அல்லது 2 பிட்களில், கூடவே MLX-இன் குரூப் ஸ்கேல்கள் (ஒரு வெயிட்டுக்கு அரை பிட்), அல்லது அதன் நேட்டிவ் வடிவம், அதற்கு மேல் கான்டெக்ஸ்ட்டுக்கு இடம். இயல்பாக macOS, யூனிஃபைடு மெமரியில் சுமார் 75%-ஐ GPU பயன்படுத்த அனுமதிக்கிறது. வேகம்: மெமரி பேண்ட்வித்தை ஒவ்வொரு டோக்கனுக்கும் படிக்கப்படும் பைட்டுகளால் வகுத்தால், ஒரு உரையாடலுக்கான உச்சவரம்பு கிடைக்கும்; llama.cpp-இன் பொது Apple Silicon பெஞ்ச்மார்க்குகளில் உண்மையான ரன்கள் அதில் சுமார் 45% முதல் 80% வரை எட்டுகின்றன, அந்த வரம்பே காட்டப்படுகிறது. இவை மதிப்பீடுகள், அளவீடுகள் அல்ல: உங்கள் சொந்த Mac-ஐ MLX Bench-இல் அளந்து பாருங்கள். மாடல் விவரங்கள் ஒவ்வொரு அதிகாரப்பூர்வ மாடல் கார்டிலிருந்தும், சிப் விவரங்கள் Apple-இன் Tech Specs-இலிருந்தும். சரிபார்த்தது 2026-10-19. mlx.app/compare-இல் உள்ள அதே தரவு.

Mac-இல் Mistral Large 3 (675B) இயங்குமா? மெமரி, வேகம்