Με λίγα λόγια
- Για Apple Silicon υπάρχουν δύο μορφές μοντέλων: η MLX, φτιαγμένη για τα τσιπ της Apple, και η GGUF, από το llama.cpp, που τρέχει παντού.
- Το mlx-lm τρέχει MLX· το llama.cpp τρέχει GGUF· τα LM Studio, Jan και (σε προεπισκόπηση) Ollama τρέχουν και τα δύο.
- Πλήρως ανοιχτού κώδικα: Ollama, Jan, llama.cpp και mlx-lm. Το LM Studio είναι δωρεάν, και για επαγγελματική χρήση, αλλά ο κώδικας της εφαρμογής του για υπολογιστή δεν έχει δημοσιευτεί.
- Ό,τι κι αν διαλέξετε, η μνήμη καθορίζει ποια μοντέλα χωράνε: πρώτα ελέγξτε τον Mac σας.
1Με μια ματιά
| Ανοιχτός κώδικας | Τρέχει σε Mac | Εφαρμογή | Τοπικό API | |
|---|---|---|---|---|
| LM Studio | CLI, SDK και μηχανή MLX (MIT)· ο κώδικας της εφαρμογής δεν έχει δημοσιευτεί | MLX και GGUF | Εφαρμογή Mac και CLI | OpenAI και Anthropic |
| Ollama | Ναι (MIT) | GGUF· MLX σε προεπισκόπηση | Εφαρμογή Mac και CLI | Δικό του, συν υποσύνολα OpenAI και Anthropic |
| Jan | Ναι (Apache 2.0) | GGUF και MLX | Εφαρμογή Mac | OpenAI |
| llama.cpp | Ναι (MIT) | GGUF | Γραμμή εντολών και web UI | OpenAI και Anthropic |
| mlx-lm | Ναι (MIT) | MLX | Γραμμή εντολών | Τύπου OpenAI, βασικό |
2Το καθένα σε λίγες γραμμές
LM Studio
Μια προσεγμένη εφαρμογή που τρέχει μοντέλα MLX και GGUF δίπλα δίπλα, με αναζήτηση μοντέλων βασισμένη στο Hugging Face (LM Studio). Η χρήση της είναι δωρεάν στο σπίτι και στη δουλειά από τον Ιούλιο του 2025 (LM Studio). Το εργαλείο γραμμής εντολών, τα SDK και η μηχανή MLX έχουν άδεια MIT· ο κώδικας της εφαρμογής για υπολογιστή δεν έχει δημοσιευτεί (GitHub). Χρειάζεται macOS 14 ή νεότερο σε Apple Silicon και προτείνει 16 GB μνήμης (απαιτήσεις). Ο τοπικός διακομιστής της μιλά τη μορφή OpenAI και, από την έκδοση 0.4.1, τη μορφή Anthropic (αλλαγές).
Ollama
Ο τρόπος να τρέξετε ένα μοντέλο με μία εντολή, με δική του βιβλιοθήκη μοντέλων και, από τον Ιούλιο του 2025, εφαρμογή συνομιλίας στον Mac (Ollama). Έχει άδεια MIT και τρέχει μοντέλα GGUF μέσω του llama.cpp (GitHub). Από τον Μάρτιο του 2026 έχει μηχανή MLX σε προεπισκόπηση σε Apple Silicon, για Mac με περισσότερα από 32 GB μνήμης και μια λίστα μοντέλων που μεγαλώνει (Ollama). Χρειάζεται macOS 14 ή νεότερο (τεκμηρίωση), και το API του στη θύρα 11434 είναι αυτό που περιμένουν πολλές άλλες εφαρμογές.
Jan
Μια εφαρμογή συνομιλίας ανοιχτού κώδικα (Apache 2.0) για Mac, Windows και Linux, με ενσωματωμένη μηχανή llama.cpp, εγγενή υποστήριξη MLX από τον Φεβρουάριο του 2026, εργαλεία MCP και διακομιστή συμβατό με OpenAI (GitHub, αλλαγές). Μπορεί να συνδεθεί και σε μοντέλα cloud, αν θέλετε μία εφαρμογή και για τα δύο.
llama.cpp
Η μηχανή κάτω από μεγάλο μέρος της τοπικής AI: C/C++ με άδεια MIT, όπου το Apple Silicon είναι «πολίτης πρώτης κατηγορίας» μέσω Metal (GitHub). Εγκαταστήστε το με brew install llama.cpp· το llama-server σάς δίνει συνομιλία στο πρόγραμμα περιήγησης και API συμβατό με OpenAI και Anthropic (τεκμηρίωση διακομιστή). Τρέχει αρχεία GGUF, τη μορφή που δημοσιεύεται πιο συχνά.
mlx-lm
Τα εργαλεία MLX της ίδιας της Apple για γλωσσικά μοντέλα, με άδεια MIT: δημιουργία κειμένου, συνομιλία, μετατροπή και κβαντοποίηση μοντέλων, και fine-tuning με LoRA, από τη γραμμή εντολών (GitHub). Το mlx_lm.server δίνει ένα βασικό endpoint τύπου OpenAI που οι δημιουργοί του δεν προτείνουν για παραγωγική χρήση (τεκμηρίωση διακομιστή). Χιλιάδες μετατρεμμένα μοντέλα βρίσκονται στον οργανισμό mlx-community στο Hugging Face.
3Ποιο να διαλέξετε
- Θέλετε μοντέλα MLX και GGUF σε μία προσεγμένη εφαρμογή και δεν σας πειράζει ο κλειστός κώδικας: LM Studio.
- Μια άλλη εφαρμογή ή ένας agent προγραμματισμού περιμένει το API του Ollama: Ollama.
- Θέλετε μία εφαρμογή συνομιλίας σε Mac, Windows και Linux, τοπικά και στο cloud: Jan.
- Γράφετε scripts, στήνετε διακομιστές ή χρειάζεστε συγκεκριμένη κβαντοποίηση GGUF: llama.cpp.
- Κάνετε fine-tuning, μετατρέπετε μοντέλα ή θέλετε την υλοποίηση αναφοράς της Apple: mlx-lm.
Πολλοί χρησιμοποιούν δύο: μια εφαρμογή για την καθημερινή συνομιλία και ένα εργαλείο γραμμής εντολών για scripts. Μπορούν να μοιράζονται τον ίδιο Mac, αλλά το καθένα κρατά το δικό του αντίγραφο των αρχείων του μοντέλου.
Συγκρίνετε αυτές τις εφαρμογές δίπλα δίπλα στο AI App Store: κάθε καταχώριση οδηγεί στην επίσημη λήψη του δημιουργού και δείχνει την τιμή, την άδεια χρήσης και πού πηγαίνουν τα δεδομένα σας.
4Πρώτα, δείτε τι χωράει ο Mac σας
Καμία εφαρμογή δεν αλλάζει την αριθμητική: ένα μοντέλο και τα συμφραζόμενά του πρέπει να χωρούν στο μερίδιο της ενοποιημένης μνήμης που αφήνει το macOS στη GPU, περίπου 75% από προεπιλογή, και το εύρος ζώνης μνήμης καθορίζει πόσο γρήγορα γράφει. Αρχεία MLX και GGUF του ίδιου μοντέλου στην ίδια ακρίβεια έχουν περίπου το ίδιο μέγεθος.
Δείτε κάθε μοντέλο που χωράει στον Mac σας, τα καλύτερα μοντέλα για κάθε μέγεθος μνήμης, ή ξεκινήστε από ένα μοντέλο για να δείτε ποιον Mac χρειάζεται.
5Όταν ο Mac είναι σε αδράνεια
Ένας Mac που τρέχει καλά τοπική AI είναι καλός και στο να την τρέχει για άλλους. Το MLX Node εκτελεί εργασίες AI για το MLX Network όταν δεν χρησιμοποιείτε τον Mac σας, μέσα στα όρια που ορίζετε, και κερδίζει tokens MLX για επαληθευμένη δουλειά. Τα tokens MLX μπορεί να χάσουν αξία· διαβάστε τους κινδύνους.
6Ερωτήσεις
- Είναι το LM Studio δωρεάν για επαγγελματική χρήση;
- Ναι. Από τον Ιούλιο του 2025 η χρήση του LM Studio είναι δωρεάν και στο σπίτι και στη δουλειά· τα πληρωμένα πλάνα είναι για ομάδες και επιχειρήσεις (LM Studio).
- Χρησιμοποιεί το Ollama το MLX σε Mac;
- Σε προεπισκόπηση από τον Μάρτιο του 2026, σε Mac με Apple Silicon και περισσότερα από 32 GB μνήμης, για τα υποστηριζόμενα μοντέλα. Αλλιώς τρέχει μοντέλα GGUF μέσω του llama.cpp (Ollama).
- Ποια εφαρμογή τρέχει και μοντέλα MLX και GGUF;
- Το LM Studio και το Jan τρέχουν και τα δύο· το Ollama τρέχει GGUF και, σε προεπισκόπηση, MLX. Το mlx-lm τρέχει μόνο MLX· το llama.cpp τρέχει μόνο GGUF.
- Ποιες εφαρμογές τοπικών LLM είναι ανοιχτού κώδικα;
- Το Ollama (MIT), το Jan (Apache 2.0), το llama.cpp (MIT) και το mlx-lm (MIT). Το LM Studio δημοσιεύει το εργαλείο γραμμής εντολών, τα SDK και τη μηχανή MLX με άδεια MIT, αλλά όχι την εφαρμογή για υπολογιστή.
Πηγές
- LM Studio στο GitHubgithub.com
- LM Studio MLXlmstudio.ai
- Ollamagithub.com
- προεπισκόπηση MLX του Ollamaollama.com
- Jangithub.com
- διακομιστής llama.cppgithub.com
- διακομιστής mlx-lmgithub.com
- LM Studiolmstudio.ai
- απαιτήσειςlmstudio.ai
- αλλαγέςlmstudio.ai
- Ollamaollama.com
- τεκμηρίωσηdocs.ollama.com
- αλλαγέςjan.ai
- GitHubgithub.com
- GitHubgithub.com
- εκδόσειςgithub.com