Οι καλύτερες εφαρμογές για εκτέλεση LLM σε Mac.

Πέντε εργαλεία καλύπτουν σχεδόν κάθε τρόπο να τρέξετε ένα ανοιχτό μοντέλο AI σε Mac. Διαφέρουν σε τέσσερα σημεία που μετράνε: αν μπορείτε να διαβάσετε τον κώδικα, ποιες μορφές μοντέλων τρέχουν, αν υπάρχει εφαρμογή ή μόνο γραμμή εντολών, και τι είδους τοπικό API μπορούν να χρησιμοποιήσουν οι άλλες σας εφαρμογές.

Ενημέρωση

Με λίγα λόγια

  • Για Apple Silicon υπάρχουν δύο μορφές μοντέλων: η MLX, φτιαγμένη για τα τσιπ της Apple, και η GGUF, από το llama.cpp, που τρέχει παντού.
  • Το mlx-lm τρέχει MLX· το llama.cpp τρέχει GGUF· τα LM Studio, Jan και (σε προεπισκόπηση) Ollama τρέχουν και τα δύο.
  • Πλήρως ανοιχτού κώδικα: Ollama, Jan, llama.cpp και mlx-lm. Το LM Studio είναι δωρεάν, και για επαγγελματική χρήση, αλλά ο κώδικας της εφαρμογής του για υπολογιστή δεν έχει δημοσιευτεί.
  • Ό,τι κι αν διαλέξετε, η μνήμη καθορίζει ποια μοντέλα χωράνε: πρώτα ελέγξτε τον Mac σας.

1Με μια ματιά

Ανοιχτός κώδικαςΤρέχει σε MacΕφαρμογήΤοπικό API
LM StudioCLI, SDK και μηχανή MLX (MIT)· ο κώδικας της εφαρμογής δεν έχει δημοσιευτείMLX και GGUFΕφαρμογή Mac και CLIOpenAI και Anthropic
OllamaΝαι (MIT)GGUF· MLX σε προεπισκόπησηΕφαρμογή Mac και CLIΔικό του, συν υποσύνολα OpenAI και Anthropic
JanΝαι (Apache 2.0)GGUF και MLXΕφαρμογή MacOpenAI
llama.cppΝαι (MIT)GGUFΓραμμή εντολών και web UIOpenAI και Anthropic
mlx-lmΝαι (MIT)MLXΓραμμή εντολώνΤύπου OpenAI, βασικό
Πηγές: LM Studio στο GitHub, LM Studio MLX, Ollama, προεπισκόπηση MLX του Ollama, Jan, διακομιστής llama.cpp, διακομιστής mlx-lm.

2Το καθένα σε λίγες γραμμές

LM Studio

Μια προσεγμένη εφαρμογή που τρέχει μοντέλα MLX και GGUF δίπλα δίπλα, με αναζήτηση μοντέλων βασισμένη στο Hugging Face (LM Studio). Η χρήση της είναι δωρεάν στο σπίτι και στη δουλειά από τον Ιούλιο του 2025 (LM Studio). Το εργαλείο γραμμής εντολών, τα SDK και η μηχανή MLX έχουν άδεια MIT· ο κώδικας της εφαρμογής για υπολογιστή δεν έχει δημοσιευτεί (GitHub). Χρειάζεται macOS 14 ή νεότερο σε Apple Silicon και προτείνει 16 GB μνήμης (απαιτήσεις). Ο τοπικός διακομιστής της μιλά τη μορφή OpenAI και, από την έκδοση 0.4.1, τη μορφή Anthropic (αλλαγές).

Ollama

Ο τρόπος να τρέξετε ένα μοντέλο με μία εντολή, με δική του βιβλιοθήκη μοντέλων και, από τον Ιούλιο του 2025, εφαρμογή συνομιλίας στον Mac (Ollama). Έχει άδεια MIT και τρέχει μοντέλα GGUF μέσω του llama.cpp (GitHub). Από τον Μάρτιο του 2026 έχει μηχανή MLX σε προεπισκόπηση σε Apple Silicon, για Mac με περισσότερα από 32 GB μνήμης και μια λίστα μοντέλων που μεγαλώνει (Ollama). Χρειάζεται macOS 14 ή νεότερο (τεκμηρίωση), και το API του στη θύρα 11434 είναι αυτό που περιμένουν πολλές άλλες εφαρμογές.

Jan

Μια εφαρμογή συνομιλίας ανοιχτού κώδικα (Apache 2.0) για Mac, Windows και Linux, με ενσωματωμένη μηχανή llama.cpp, εγγενή υποστήριξη MLX από τον Φεβρουάριο του 2026, εργαλεία MCP και διακομιστή συμβατό με OpenAI (GitHub, αλλαγές). Μπορεί να συνδεθεί και σε μοντέλα cloud, αν θέλετε μία εφαρμογή και για τα δύο.

llama.cpp

Η μηχανή κάτω από μεγάλο μέρος της τοπικής AI: C/C++ με άδεια MIT, όπου το Apple Silicon είναι «πολίτης πρώτης κατηγορίας» μέσω Metal (GitHub). Εγκαταστήστε το με brew install llama.cpp· το llama-server σάς δίνει συνομιλία στο πρόγραμμα περιήγησης και API συμβατό με OpenAI και Anthropic (τεκμηρίωση διακομιστή). Τρέχει αρχεία GGUF, τη μορφή που δημοσιεύεται πιο συχνά.

mlx-lm

Τα εργαλεία MLX της ίδιας της Apple για γλωσσικά μοντέλα, με άδεια MIT: δημιουργία κειμένου, συνομιλία, μετατροπή και κβαντοποίηση μοντέλων, και fine-tuning με LoRA, από τη γραμμή εντολών (GitHub). Το mlx_lm.server δίνει ένα βασικό endpoint τύπου OpenAI που οι δημιουργοί του δεν προτείνουν για παραγωγική χρήση (τεκμηρίωση διακομιστή). Χιλιάδες μετατρεμμένα μοντέλα βρίσκονται στον οργανισμό mlx-community στο Hugging Face.

Το GPT4All (MIT) εγκαθίσταται ακόμα σε Mac, αλλά δεν έχει βγάλει νέα έκδοση από τον Φεβρουάριο του 2025 (εκδόσεις).

3Ποιο να διαλέξετε

  • Θέλετε μοντέλα MLX και GGUF σε μία προσεγμένη εφαρμογή και δεν σας πειράζει ο κλειστός κώδικας: LM Studio.
  • Μια άλλη εφαρμογή ή ένας agent προγραμματισμού περιμένει το API του Ollama: Ollama.
  • Θέλετε μία εφαρμογή συνομιλίας σε Mac, Windows και Linux, τοπικά και στο cloud: Jan.
  • Γράφετε scripts, στήνετε διακομιστές ή χρειάζεστε συγκεκριμένη κβαντοποίηση GGUF: llama.cpp.
  • Κάνετε fine-tuning, μετατρέπετε μοντέλα ή θέλετε την υλοποίηση αναφοράς της Apple: mlx-lm.

Πολλοί χρησιμοποιούν δύο: μια εφαρμογή για την καθημερινή συνομιλία και ένα εργαλείο γραμμής εντολών για scripts. Μπορούν να μοιράζονται τον ίδιο Mac, αλλά το καθένα κρατά το δικό του αντίγραφο των αρχείων του μοντέλου.

Συγκρίνετε αυτές τις εφαρμογές δίπλα δίπλα στο AI App Store: κάθε καταχώριση οδηγεί στην επίσημη λήψη του δημιουργού και δείχνει την τιμή, την άδεια χρήσης και πού πηγαίνουν τα δεδομένα σας.

4Πρώτα, δείτε τι χωράει ο Mac σας

Καμία εφαρμογή δεν αλλάζει την αριθμητική: ένα μοντέλο και τα συμφραζόμενά του πρέπει να χωρούν στο μερίδιο της ενοποιημένης μνήμης που αφήνει το macOS στη GPU, περίπου 75% από προεπιλογή, και το εύρος ζώνης μνήμης καθορίζει πόσο γρήγορα γράφει. Αρχεία MLX και GGUF του ίδιου μοντέλου στην ίδια ακρίβεια έχουν περίπου το ίδιο μέγεθος.

Δείτε κάθε μοντέλο που χωράει στον Mac σας, τα καλύτερα μοντέλα για κάθε μέγεθος μνήμης, ή ξεκινήστε από ένα μοντέλο για να δείτε ποιον Mac χρειάζεται.

5Όταν ο Mac είναι σε αδράνεια

Ένας Mac που τρέχει καλά τοπική AI είναι καλός και στο να την τρέχει για άλλους. Το MLX Node εκτελεί εργασίες AI για το MLX Network όταν δεν χρησιμοποιείτε τον Mac σας, μέσα στα όρια που ορίζετε, και κερδίζει tokens MLX για επαληθευμένη δουλειά. Τα tokens MLX μπορεί να χάσουν αξία· διαβάστε τους κινδύνους.

6Ερωτήσεις

Είναι το LM Studio δωρεάν για επαγγελματική χρήση;
Ναι. Από τον Ιούλιο του 2025 η χρήση του LM Studio είναι δωρεάν και στο σπίτι και στη δουλειά· τα πληρωμένα πλάνα είναι για ομάδες και επιχειρήσεις (LM Studio).
Χρησιμοποιεί το Ollama το MLX σε Mac;
Σε προεπισκόπηση από τον Μάρτιο του 2026, σε Mac με Apple Silicon και περισσότερα από 32 GB μνήμης, για τα υποστηριζόμενα μοντέλα. Αλλιώς τρέχει μοντέλα GGUF μέσω του llama.cpp (Ollama).
Ποια εφαρμογή τρέχει και μοντέλα MLX και GGUF;
Το LM Studio και το Jan τρέχουν και τα δύο· το Ollama τρέχει GGUF και, σε προεπισκόπηση, MLX. Το mlx-lm τρέχει μόνο MLX· το llama.cpp τρέχει μόνο GGUF.
Ποιες εφαρμογές τοπικών LLM είναι ανοιχτού κώδικα;
Το Ollama (MIT), το Jan (Apache 2.0), το llama.cpp (MIT) και το mlx-lm (MIT). Το LM Studio δημοσιεύει το εργαλείο γραμμής εντολών, τα SDK και τη μηχανή MLX με άδεια MIT, αλλά όχι την εφαρμογή για υπολογιστή.

Πηγές

  1. LM Studio στο GitHubgithub.com
  2. LM Studio MLXlmstudio.ai
  3. Ollamagithub.com
  4. προεπισκόπηση MLX του Ollamaollama.com
  5. Jangithub.com
  6. διακομιστής llama.cppgithub.com
  7. διακομιστής mlx-lmgithub.com
  8. LM Studiolmstudio.ai
  9. απαιτήσειςlmstudio.ai
  10. αλλαγέςlmstudio.ai
  11. Ollamaollama.com
  12. τεκμηρίωσηdocs.ollama.com
  13. αλλαγέςjan.ai
  14. GitHubgithub.com
  15. GitHubgithub.com
  16. εκδόσειςgithub.com

Διαβάστε επίσης