Czy Mac uruchomi Llama 4 Scout 17B-16E Instruct?

Tak, z 96 GB pamięci zunifikowanej lub więcej. Llama 4 Scout 17B-16E Instruct ma 109B parametrów, z czego 17B jest aktywnych dla każdego tokenu. Oto ile pamięci potrzebuje przy każdej precyzji i jak szybko działa na każdym układzie Apple.

Pamięć (4-bit)66,2 GBwagi 61,3 GB + kontekst
Najmniejszy Mac96 GB4-bit · konfiguracje Maców: 23
Najszybszy Mac56–100tokeny/s · M5 Ultra 96 GB (szacunek)

Pamięć przy każdej precyzji

WersjaWagiZ kontekstemNajmniejszy Mac
8-bit116 GB125 GB192 GB
6-bit88,6 GB95,7 GB128 GB
4-bit61,3 GB66,2 GB96 GB
3-bit niższa jakość47,7 GB51,5 GB96 GB
2-bit niższa jakość34,1 GB36,8 GB64 GB

Na każdym układzie Apple

Najmniejsza pamięć każdego układu, na której działa Llama 4 Scout 17B-16E Instruct, najlepsza wersja, która się mieści, i spodziewana szybkość generowania.

UkładPotrzebujeWersjaTokeny/s
M6żaden rozmiar nie pasujeZa duży–
M5 Ultra96 GB4-bit Działa dobrze56–100
M5 Max128 GB6-bit Działa dobrze20–36
M5 Pro64 GB2-bit Działa dobrze26–46
M5żaden rozmiar nie pasujeZa duży–
M4 Max128 GB6-bit Działa dobrze18–32
M4 Pro64 GB2-bit Działa dobrze23–41
M4żaden rozmiar nie pasujeZa duży–
M3 Ultra96 GB4-bit Działa dobrze38–68
M3 Max96 GB4-bit Działa dobrze14–25
M3 Prożaden rozmiar nie pasujeZa duży–
M3żaden rozmiar nie pasujeZa duży–
M2 Ultra128 GB6-bit Działa dobrze26–46
M2 Max96 GB4-bit Działa dobrze19–33
M2 Prożaden rozmiar nie pasujeZa duży–
M2żaden rozmiar nie pasujeZa duży–
M1 Ultra128 GB6-bit Działa dobrze26–46
M1 Max64 GB2-bit Działa dobrze34–60
M1 Prożaden rozmiar nie pasujeZa duży–
M1żaden rozmiar nie pasujeZa duży–

Jak go uruchomić

  1. Najprościej: pobierz MLX Harness, za darmo i z otwartym kodem. Wyszukaj Llama 4 Scout 17B-16E Instruct, pobierz wersję pasującą do Twojego Maca i rozmawiaj. Aplikacja udostępnia też model innym Twoim aplikacjom przez API zgodne z OpenAI.Pobierz MLX HarnessZa darmo · Apple Silicon · macOS 14.5 lub nowszy
  2. W Terminalu z MLX od Apple:pip install mlx-lmmlx_lm.chat --model mlx-community/Llama-4-Scout-17B-16E-Instruct-4bitWersja: mlx-community/Llama-4-Scout-17B-16E-Instruct-4bit na Hugging Face. Obok znajdziesz inne precyzje.

Krok po kroku: pobierz i uruchom LLM na Macu · jak używać MLX Harness · MLX, Ollama i llama.cpp

O modelu Llama 4 Scout 17B-16E Instruct

TwórcaMeta
Parametry109B łącznie · 17B aktywnych (mixture of experts)
Konteksttokeny: 10M
LicencjaLlama 4 Community License
Wydany2025-04
WejścieTekst i obrazy
Inteligencja6,5 w Artificial Analysis Intelligence Index
Wagimeta-llama/Llama-4-Scout-17B-16E-Instruct

Pytania

Ile pamięci potrzebuje Llama 4 Scout 17B-16E Instruct?
Około 61,3 GB na wagi (4-bit) plus miejsce na kontekst: łącznie 66,2 GB. Na Macu oznacza to 96 GB pamięci zunifikowanej lub więcej, bo macOS domyślnie pozwala GPU używać około 75% pamięci.
Jak szybko działa Llama 4 Scout 17B-16E Instruct na Macu?
Szybkość generowania zależy od przepustowości pamięci. Najszybszy Mac dla tego modelu to M5 Ultra z 96 GB: około 56–100 tokenów na sekundę (4-bit). Najmniejszy Mac, który go uruchomi, M5 Ultra z 96 GB, osiąga około 56–100.
Dlaczego Llama 4 Scout 17B-16E Instruct działa szybciej, niż wskazuje jego rozmiar?
To model mixture-of-experts: trzyma w pamięci 109B parametrów, ale dla każdego tokenu odczytuje tylko 17B, więc generuje z szybkością znacznie mniejszego modelu.

Podobne modele

Wszystkie modele · Wszystkie Maki · Porównaj swojego Maca

Do karty modelu lub README

Runs on a Mac: Llama 4 Scout 17B-16E Instruct Pokazuje najmniejszego Maca, na którym Llama 4 Scout 17B-16E Instruct działa dobrze, i prowadzi tutaj.

[![Runs on a Mac](https://mlx.app/badge/run/llama-4-scout.svg)](https://mlx.app/run/llama-4-scout)

Jak to liczymy

Pamięć: parametry modelu przy 8, 6, 4, 3 lub 2 bitach na wagę plus skale grup MLX (pół bita na wagę) albo jego natywny format, a do tego miejsce na kontekst. Domyślnie macOS pozwala GPU używać około 75% pamięci zunifikowanej. Szybkość: przepustowość pamięci podzielona przez liczbę bajtów odczytywanych na token to górna granica dla jednej rozmowy; w publicznych testach llama.cpp na Apple Silicon rzeczywiste uruchomienia osiągają od około 45% do 80% tej wartości i właśnie ten zakres pokazujemy. To szacunki, nie pomiary: zmierz swojego Maca w MLX Bench. Dane modeli pochodzą z oficjalnych kart modeli, dane układów ze specyfikacji technicznych Apple. Sprawdzono 2026-10-19. Te same dane co na mlx.app/compare.

Czy Mac uruchomi Llama 4 Scout 17B-16E Instruct? Pamięć i szybkość