Mac-இல் Recursive Flint இயங்குமா?

ஆம், 36 GB அல்லது அதற்கு மேல் யூனிஃபைடு மெமரி இருந்தால். Recursive Flint-இல் 39.8B பாராமீட்டர்கள் உள்ளன, அவற்றில் ஒவ்வொரு டோக்கனுக்கும் 2.5B செயலில் இருக்கும்; ஒவ்வொரு பிரிசிஷனிலும் இதற்குத் தேவையான மெமரியையும், ஒவ்வொரு Apple சிப்பும் இதை எவ்வளவு வேகமாக இயக்கும் என்பதையும் இங்கே பாருங்கள். Recursive-இன் சொந்த இன்ஜின் Rec-க்கு குறைந்தது 48 GB யூனிஃபைட் மெமரி கொண்ட M4 Pro, M5 Pro அல்லது M5 Max தேவை (தயாரிப்பாளரின் நிபந்தனை). இந்தப் பக்கத்தில் உள்ள மெமரி மற்றும் வேக எண்கள் பொதுவான MLX பில்டுக்கான மதிப்பீடுகள்.

புதுப்பிக்கப்பட்டது

4-பிட்-இல் மெமரி24.2 GBவெயிட்கள் 22.4 GB + கான்டெக்ஸ்ட்
மிகச் சிறிய Mac36 GB4-பிட், மதிப்பீடு · Rec-க்கு 48 GB தேவை
மிக வேகமான Mac200–356டோக்கன்கள்/வினாடி · M5 Ultra 96 GB (மதிப்பீடு)

ஒவ்வொரு பிரிசிஷனிலும் மெமரி

பதிப்புவெயிட்கள்கான்டெக்ஸ்ட்டுடன்மிகச் சிறிய Mac
8-பிட்42.3 GB45.7 GB64 GB
6-பிட்32.3 GB34.9 GB48 GB
4-பிட்22.4 GB24.2 GB36 GB
3-பிட் குறைந்த தரம்17.4 GB18.9 GB32 GB
2-பிட் குறைந்த தரம்12.4 GB13.9 GB24 GB

ஒவ்வொரு Apple சிப்பிலும்

Recursive Flint-ஐ இயக்கும் ஒவ்வொரு சிப்பின் மிகச் சிறிய மெமரி அளவு, அதில் பொருந்தும் சிறந்த பதிப்பு, எதிர்பார்க்கக்கூடிய எழுதும் வேகம்.

சிப்தேவைபதிப்புடோக்கன்கள்/வினாடி
M624 GB2-பிட் நன்றாக இயங்கும்96–170
M5 Ultra96 GB8-பிட் நன்றாக இயங்கும்200–356
M5 Max36 GB4-பிட் நன்றாக இயங்கும்148–263
M5 Pro48 GB6-பிட் நன்றாக இயங்கும்69–123
M524 GB2-பிட் நன்றாக இயங்கும்86–153
M4 Max36 GB4-பிட் நன்றாக இயங்கும்132–234
M4 Pro48 GB6-பிட் நன்றாக இயங்கும்61–109
M424 GB2-பிட் நன்றாக இயங்கும்68–120
M3 Ultra96 GB8-பிட் நன்றாக இயங்கும்137–243
M3 Max36 GB4-பிட் நன்றாக இயங்கும்96–171
M3 Pro36 GB4-பிட் நன்றாக இயங்கும்48–86
M324 GB2-பிட் நன்றாக இயங்கும்56–100
M2 Ultra64 GB8-பிட் நன்றாக இயங்கும்133–237
M2 Max64 GB8-பிட் நன்றாக இயங்கும்67–119
M2 Pro32 GB3-பிட் நன்றாக இயங்கும்82–145
M224 GB2-பிட் நன்றாக இயங்கும்56–100
M1 Ultra64 GB8-பிட் நன்றாக இயங்கும்133–237
M1 Max64 GB8-பிட் நன்றாக இயங்கும்67–119
M1 Pro32 GB3-பிட் நன்றாக இயங்கும்82–145
M116 GB2-பிட் விளிம்பில்38–68

மற்றவர்கள் அளந்தது

மற்றவர்கள் தங்கள் சொந்த Mac-இல் அளந்து பொதுவில் பகிர்ந்த Recursive Flint உருவாக்க வேகங்கள். இவை மூன்றாம் தரப்பு அளவீடுகள், எங்களுடையவை அல்ல, மேலே உள்ள மதிப்பீடுகளும் அல்ல.

Macஇயக்கச் சூழல்துல்லியம்டிகோட் tok/sமூலம்
Mac Studio M3 UltraOllama (MLX engine)INT4 (QAT)107Alec Kloss @aleckloss
Mac Studio M3 Ultramlx-lm (PR #1998)INT4 (QAT)104.5Alec Kloss @aleckloss
Mac Studio M3 Ultramlx-vlmBF1651.31K சூழலில்Prince Canuma @Prince_Canuma
Mac Studio M3 Ultramlx-vlmBF1633128K சூழலில்Prince Canuma @Prince_Canuma
Mac mini M5 Pro 64 GBOllama4-bit115Pratik Gandhi @pratikg
Mac mini M5 Pro 64 GBOllama4-bit8720K சூழலில்Pratik Gandhi @pratikg

முடிவுகள் இயக்கச் சூழலையும் அமைப்புகளையும் பொறுத்து மாறும்: பதிப்பு, துல்லியம், சூழல் நீளம், ப்ராம்ப்ட், ரீசனிங் ஆன் அல்லது ஆஃப் ஆகிய அனைத்தும் வேகத்தை மாற்றும்.

இதை எப்படி இயக்குவது

  1. Terminal-இல் Rec உடன், இது தயாரிப்பாளரின் சொந்த இன்ஜின்:curl -fsSL https://raw.githubusercontent.com/recursive-oss/rec/main/install.sh | bashrec launch piதேவைகள்: M4 Pro, M5 Pro or M5 Max · at least 48 GB unified memory · about 30 GB free disk · Node.js 22 and npm (for pi)பில்ட்: Hugging Face-இல் RecursiveSI/flint-int4. மற்ற பிரிசிஷன்கள் அதன் அருகிலேயே உள்ளன.

படிப்படியாக: Mac-இல் LLM-களைப் பதிவிறக்கி இயக்குங்கள் · MLX Harness-வை எப்படிப் பயன்படுத்துவது · MLX vs Ollama vs llama.cpp

Recursive Flint பற்றி

உருவாக்கியவர்Recursive
பாராமீட்டர்கள்மொத்தம் 39.8B · செயலில் 2.5B (mixture of experts)
கான்டெக்ஸ்ட்256K டோக்கன்கள்
உரிமம்Apache-2.0
வெளியீடு2026-10
உள்ளீடுஉரை
வெயிட்கள்RecursiveSI/flint

கேள்விகள்

Recursive Flint-க்கு எவ்வளவு மெமரி தேவை?
4-பிட்-இல் சுமார் 22.4 GB வெயிட்கள், கூடவே கான்டெக்ஸ்ட்டுக்கு இடம்: மொத்தம் 24.2 GB. Mac-இல் இதன் பொருள் 36 GB அல்லது அதற்கு மேல் யூனிஃபைடு மெமரி, ஏனெனில் இயல்பாக macOS அதில் சுமார் 75%-ஐ மட்டுமே GPU பயன்படுத்த அனுமதிக்கிறது. Recursive-இன் சொந்த இன்ஜின் Rec-க்கு குறைந்தது 48 GB யூனிஃபைட் மெமரி கொண்ட M4 Pro, M5 Pro அல்லது M5 Max தேவை (தயாரிப்பாளரின் நிபந்தனை).
Mac-இல் Recursive Flint எவ்வளவு வேகமாக இயங்கும்?
எழுதும் வேகம் மெமரி பேண்ட்வித்தைப் பொறுத்தது. இங்கே இதற்கு மிக வேகமான Mac 96 GB கொண்ட M5 Ultra, வினாடிக்கு சுமார் 200–356 டோக்கன்கள் (8-பிட்). இதை இயக்கும் மிகச் சிறிய Mac, 36 GB கொண்ட M5 Max, சுமார் 148–263 வரை எட்டும்.
Recursive Flint அதன் அளவை விட ஏன் வேகமாக இயங்குகிறது?
இது ஒரு mixture-of-experts மாடல்: மெமரியில் 39.8B பாராமீட்டர்களை வைத்திருந்தாலும், ஒவ்வொரு டோக்கனுக்கும் 2.5B மட்டுமே படிக்கிறது, அதனால் மிகச் சிறிய மாடலின் வேகத்தில் எழுதுகிறது.

இதே போன்ற மாடல்கள்

எல்லா மாடல்களும் · எல்லா Mac-களும் · உங்கள் Mac-ஐ ஒப்பிடுங்கள்

உங்கள் மாடல் கார்டு அல்லது README-க்கு

Runs on a Mac: Recursive Flint Recursive Flint-ஐ நன்றாக இயக்கும் மிகச் சிறிய Mac-ஐக் காட்டி, இங்கே இணைப்பு தருகிறது.

[![Runs on a Mac](https://mlx.app/badge/run/flint.svg)](https://mlx.app/run/flint)

எப்படிக் கணக்கிடப்பட்டது

மெமரி: மாடலின் பாராமீட்டர்கள் ஒரு வெயிட்டுக்கு 8, 6, 4, 3 அல்லது 2 பிட்களில், கூடவே MLX-இன் குரூப் ஸ்கேல்கள் (ஒரு வெயிட்டுக்கு அரை பிட்), அல்லது அதன் நேட்டிவ் வடிவம், அதற்கு மேல் கான்டெக்ஸ்ட்டுக்கு இடம். இயல்பாக macOS, யூனிஃபைடு மெமரியில் சுமார் 75%-ஐ GPU பயன்படுத்த அனுமதிக்கிறது. வேகம்: மெமரி பேண்ட்வித்தை ஒவ்வொரு டோக்கனுக்கும் படிக்கப்படும் பைட்டுகளால் வகுத்தால், ஒரு உரையாடலுக்கான உச்சவரம்பு கிடைக்கும்; llama.cpp-இன் பொது Apple Silicon பெஞ்ச்மார்க்குகளில் உண்மையான ரன்கள் அதில் சுமார் 45% முதல் 80% வரை எட்டுகின்றன, அந்த வரம்பே காட்டப்படுகிறது. இவை மதிப்பீடுகள், அளவீடுகள் அல்ல: உங்கள் சொந்த Mac-ஐ MLX Bench-இல் அளந்து பாருங்கள். மாடல் விவரங்கள் ஒவ்வொரு அதிகாரப்பூர்வ மாடல் கார்டிலிருந்தும், சிப் விவரங்கள் Apple-இன் Tech Specs-இலிருந்தும். சரிபார்த்தது 2026-10-19. mlx.app/compare-இல் உள்ள அதே தரவு.

திறந்த தரவு: mlx.app/data (JSON, CSV)

Mac-இல் Recursive Flint இயங்குமா? மெமரி, வேகம்