Μπορεί ένας Mac να τρέξει το Sage-A1.5;

Ναι, με 32 GB ενοποιημένης μνήμης ή περισσότερα. Το Sage-A1.5 έχει 35B παραμέτρους, από τις οποίες οι 2,95B είναι ενεργές σε κάθε token· εδώ θα δείτε τη μνήμη που χρειάζεται σε κάθε ακρίβεια και πόσο γρήγορα το τρέχει κάθε τσιπ της Apple.

Ενημέρωση

Μνήμη σε 4-bit21,3 GBβάρη 19,7 GB + συμφραζόμενα
Μικρότερος Mac32 GB4-bit · 47 διαμορφώσεις Mac
Ταχύτερος Mac174–310tokens/s · M5 Ultra 96 GB (εκτίμηση)

Μνήμη σε κάθε ακρίβεια

ΈκδοσηΒάρηΜε συμφραζόμεναΜικρότερος Mac
8-bit37,2 GB40,2 GB64 GB
6-bit28,4 GB30,7 GB48 GB
4-bit19,7 GB21,3 GB32 GB
3-bit χαμηλότερη ποιότητα15,3 GB16,8 GB24 GB
2-bit χαμηλότερη ποιότητα10,9 GB12,4 GB18 GB

Πόση RAM χρειάζεται ένα LLM

Σε κάθε τσιπ της Apple

Το μικρότερο μέγεθος μνήμης κάθε τσιπ που τρέχει το Sage-A1.5, η καλύτερη έκδοση που χωράει και η ταχύτητα γραφής που μπορείτε να περιμένετε.

ΤσιπΑπαιτείΈκδοσηTokens/s
M632 GB4-bit Τρέχει καλά45–80
M5 Ultra96 GB8-bit Τρέχει καλά174–310
M5 Max36 GB4-bit Τρέχει καλά122–216
M5 Pro48 GB6-bit Τρέχει καλά58–102
M532 GB4-bit Τρέχει καλά41–72
M4 Max36 GB4-bit Τρέχει καλά109–193
M4 Pro48 GB6-bit Τρέχει καλά51–91
M432 GB4-bit Τρέχει καλά32–56
M3 Ultra96 GB8-bit Τρέχει καλά119–211
M3 Max36 GB4-bit Τρέχει καλά79–141
M3 Pro36 GB4-bit Τρέχει καλά40–71
M324 GB3-bit Τρέχει καλά35–62
M2 Ultra64 GB8-bit Τρέχει καλά116–206
M2 Max32 GB4-bit Τρέχει καλά106–188
M2 Pro32 GB4-bit Τρέχει καλά53–94
M224 GB3-bit Τρέχει καλά35–62
M1 Ultra64 GB8-bit Τρέχει καλά116–206
M1 Max32 GB4-bit Τρέχει καλά106–188
M1 Pro32 GB4-bit Τρέχει καλά53–94
M116 GB2-bit Οριακά34–60

Πώς να το τρέξετε

Στο Terminal με το MLX της Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/Sage-A1.5-OptiQ-4bitBuild: mlx-community/Sage-A1.5-OptiQ-4bit στο Hugging Face. Οι άλλες ακρίβειες βρίσκονται ακριβώς δίπλα.

Βήμα προς βήμα: λήψη και εκτέλεση LLM σε Mac · MLX vs Ollama vs llama.cpp

Προτιμάτε μια εφαρμογή από το Τερματικό; Συγκρίνετε τις εφαρμογές Mac που τρέχουν τοπικά μοντέλα στο AI App Store: τιμή, άδεια και πού πηγαίνουν τα δεδομένα σας.

Σχετικά με το Sage-A1.5

ΔημιουργόςShanghai AI Laboratory (InternScience)
Παράμετροι35B συνολικά · 2,95B ενεργές (mixture of experts)
Συμφραζόμενα256K tokens
ΆδειαApache-2.0
Κυκλοφορία2026-10
ΕίσοδοςΚείμενο και εικόνες
ΒάρηInternScience/Sage-A1.5

Ερωτήσεις

Πόση μνήμη χρειάζεται το Sage-A1.5;
Περίπου 19,7 GB για τα βάρη σε 4-bit, συν χώρο για τα συμφραζόμενα: 21,3 GB συνολικά. Σε Mac αυτό σημαίνει 32 GB ενοποιημένης μνήμης ή περισσότερα, αφού το macOS αφήνει από προεπιλογή την GPU να χρησιμοποιεί περίπου το 75% της.
Πόσο γρήγορο είναι το Sage-A1.5 σε Mac;
Η ταχύτητα γραφής εξαρτάται από το εύρος ζώνης μνήμης. Ο ταχύτερος Mac γι’ αυτό εδώ είναι ένας Mac με M5 Ultra και 96 GB, με περίπου 174–310 tokens ανά δευτερόλεπτο (8-bit). Ο μικρότερος Mac που το τρέχει, με 32 GB, φτάνει περίπου τα 106–188 με M2 Max.
Γιατί το Sage-A1.5 τρέχει πιο γρήγορα απ’ ό,τι δείχνει το μέγεθός του;
Είναι μοντέλο mixture of experts: κρατά 35B παραμέτρους στη μνήμη αλλά διαβάζει μόνο 2,95B για κάθε token, οπότε γράφει με την ταχύτητα ενός πολύ μικρότερου μοντέλου.

Παρόμοια μοντέλα

Όλα τα μοντέλα · Όλοι οι Mac · Συγκρίνετε τον Mac σας

Για την κάρτα μοντέλου ή το README σας

Runs on a Mac: Sage-A1.5 Δείχνει τον μικρότερο Mac που τρέχει καλά το Sage-A1.5 και οδηγεί εδώ.

[![Runs on a Mac](https://mlx.app/badge/run/sage-a1.5.svg)](https://mlx.app/run/sage-a1.5)

Πώς υπολογίζεται

Μνήμη: οι παράμετροι του μοντέλου σε 8, 6, 4, 3 ή 2 bit ανά βάρος συν τις κλίμακες ομάδων του MLX (μισό bit ανά βάρος), ή στην εγγενή του μορφή, με χώρο για τα συμφραζόμενα από πάνω. Από προεπιλογή το macOS αφήνει την GPU να χρησιμοποιεί περίπου το 75% της ενοποιημένης μνήμης. Ταχύτητα: το εύρος ζώνης μνήμης διαιρεμένο με τα bytes που διαβάζονται ανά token είναι το ανώτατο όριο για μία συνομιλία· στα δημόσια benchmarks Apple Silicon του llama.cpp οι πραγματικές εκτελέσεις φτάνουν περίπου το 45% έως 80% του ορίου, και αυτό το εύρος δείχνουμε. Είναι εκτιμήσεις, όχι μετρήσεις: μετρήστε τον δικό σας Mac στο MLX Bench. Στοιχεία μοντέλων από την επίσημη κάρτα κάθε μοντέλου, στοιχεία τσιπ από τα Τεχνικά χαρακτηριστικά της Apple. Ελέγχθηκε 2026-10-19. Ίδια δεδομένα με το mlx.app/compare.

Ανοιχτά δεδομένα: mlx.app/data (JSON, CSV)