あなたの Mac で何が動く?

お使いの Mac、またはほかのマシンを選ぶと、どのオープン AI モデルがメモリに収まり、どれくらいの速さで動くかがわかります。各モデルのモデルカードと、各チップの公表されたメモリ・帯域幅から計算しています。

Apple M5(16 GB): 標準でモデルに使えるのは約 12 GB、 メモリ帯域幅 153 GB/s。 人気モデル 43 個のうち 20 個が動きます。 詳しいページ 実測:llama.cpp で Llama 2 7B(4 ビット)を 32 トークン/秒 (M5 (10-core GPU))。

快適に動く コンテキスト用の余裕を残して収まり、毎秒 10 トークン以上。
Gemma 4 E4BGoogle DeepMind · 2026-03 · コンテキスト 128K · 画像対応知能 8.9モデルカードMLX 版8B8ビット8.5 GB 収まる14–26 tok/s
Qwen3.5 4BQwen (Alibaba) · 2026-02 · コンテキスト 256K · 画像対応モデルカードMLX 版4B8ビット4.3 GB 収まる16–28 tok/s
Llama 3.2 3B InstructMeta · 2024-09 · コンテキスト 128KモデルカードMLX 版3.21B8ビット3.4 GB 収まる20–36 tok/s
SmolLM3 3BHugging Face · 2025-07 · コンテキスト 64KモデルカードMLX 版3B8ビット3.2 GB 収まる22–38 tok/s
Qwen3.5 0.8BQwen (Alibaba) · 2026-02 · コンテキスト 256K · 画像対応モデルカードMLX 版0.8B8ビット0.9 GB 収まる77–136 tok/s
Nemotron 3.5 Lightning 30B A3BNVIDIA · 2026-08 · コンテキスト 256K知能 12.9モデルカードMLX 版30B · アクティブ 3B2ビット 品質低め9.4 GB 収まる77–136 tok/s
gpt-oss-20bOpenAI · 2025-08 · コンテキスト 128K知能 9モデルカードMLX 版21B · アクティブ 3.6B3ビット 品質低め9.2 GB 収まる43–77 tok/s
ネイティブの低ビット形式で配布:重みは約 14 GB。
Qwen3 Coder 30B A3B InstructQwen (Alibaba) · 2025-07 · コンテキスト 256KモデルカードMLX 版30.5B · アクティブ 3.3B2ビット 品質低め9.5 GB 収まる69–122 tok/s
GLM-4.7 FlashZ.ai (Zhipu) · 2026-01 · コンテキスト 198KモデルカードMLX 版30B · アクティブ 3B2ビット 品質低め9.4 GB 収まる77–136 tok/s
Gemma 4 26B A4BGoogle DeepMind · 2026-03 · コンテキスト 256K · 画像対応モデルカードMLX 版25.2B · アクティブ 3.8B2ビット 品質低め7.9 GB 収まる57–102 tok/s
LFM2.5 24B A2BLiquid AI · 2026-10 · コンテキスト 128KモデルカードMLX 版24B · アクティブ 2B3ビット 品質低め10.5 GB 収まる77–136 tok/s
動くが遅い 収まるものの毎秒 10 トークン未満。バッチ処理には十分ですが、チャットには遅めです。
Qwen3.5 9BQwen (Alibaba) · 2026-02 · コンテキスト 256K · 画像対応知能 11.2モデルカードMLX 版9B8ビット9.6 GB 収まる7–13 tok/s
Granite 4.2 8BIBM · 2026-08 · コンテキスト 128K知能 11.1モデルカード8B8ビット8.5 GB 収まる8–14 tok/s
Phi-4 (14B)Microsoft · 2024-12 · コンテキスト 16KモデルカードMLX 版14B4ビット7.9 GB 収まる9–15 tok/s
Gemma 4 12B UnifiedGoogle DeepMind · 2026-05 · コンテキスト 256K · 画像対応モデルカードMLX 版12B6ビット9.7 GB 収まる7–13 tok/s
Llama 3.1 8B InstructMeta · 2024-07 · コンテキスト 128KモデルカードMLX 版8B8ビット8.5 GB 収まる8–14 tok/s
Qwen3.8 27BQwen (Alibaba) · 2026-08 · コンテキスト 256K · 画像対応知能 33.7モデルカードMLX 版27B2ビット 品質低め8.4 GB 収まる8–15 tok/s
Muse Glimmer 30BMeta (Meta Superintelligence Lab) · 2026-08 · コンテキスト 128K · 画像対応知能 17.5モデルカードMLX 版29.6B2ビット 品質低め9.3 GB 収まる7–13 tok/s
Gemma 4 31BGoogle DeepMind · 2026-03 · コンテキスト 256K · 画像対応知能 14.7モデルカードMLX 版30.7B2ビット 品質低め9.6 GB 収まる7–13 tok/s
Devstral Small 2 (24B)Mistral AI · 2025-11 · コンテキスト 256K · 画像対応モデルカードMLX 版24B3ビット 品質低め10.5 GB 収まる7–12 tok/s
ぎりぎり収まる メモリをほぼ使い切ります。GPU のメモリ上限を引き上げ、コンテキストを短めにしてください。
Qwen3.6 35B A3BQwen (Alibaba) · 2026-04 · コンテキスト 256K · 画像対応知能 18.2モデルカードMLX 版35B · アクティブ 3B2ビット 品質低め10.9 GB ぎりぎり77–136 tok/s

知能スコア:Artificial Analysis Intelligence Index v4.3.2(測定済みのモデルのみ)。モデル名は公式モデルカードにリンクしています。

計算方法

メモリ。 各モデルは、収まる中でいちばん高い精度で表示しています。重みあたり 8、6、4、3、2 ビットに MLX のグループスケール(重みあたり 0.5 ビット)を加えたもの、またはネイティブ形式で配布されているモデルはその形式です。Mac では標準で GPU がユニファイドメモリの約 75% を使えます。その上に、コンテキスト用の余裕を残しています。

速度。 文章を書くときは、トークンごとにアクティブな重みをすべて 1 回読み込みます。そのため、メモリ帯域幅をそのバイト数で割った値が 1 つの会話の上限です。llama.cpp の Apple Silicon 公開ベンチマークでは、実際の速度はその約 45%〜80% で、表示しているのはこの範囲です。長いプロンプトの読み込みは計算性能で決まるため、ここには含めていません。

出典。 パラメータ数、コンテキスト長、ライセンスは Hugging Face 上の各公式モデルカード(モデル名からリンク)、メモリと帯域幅は Apple と各メーカーの仕様から。2026-10-19 確認。ご自分の Mac は MLX Bench で測れます。すべての Mac、すべてのモデル、適合表の全体は JSON と CSV で無料ダウンロードできます:オープンデータ。

一覧から探す。 8 GB の M1 から 512 GB の M5 Ultra まで、すべての Mac と動かせるモデル、そしてすべてのモデルと必要な最小の Mac。

動かしてみる。 手順はこちら:Mac で LLM をダウンロードして動かす、MLX・Ollama・llama.cpp の比較、ローカル LLM に最適な Mac。Mac を使っていないあいだは、MLX Token を獲得することもできます。

LLM が自分の Mac で動くかどうかは、どうすればわかりますか?
使いたい精度でのモデルのサイズと、Mac のユニファイドメモリを比べてください。macOS は標準で、その約 75% を GPU に使わせます。さらにモデルにはコンテキスト用の余裕も必要です。4 ビットのモデルなら、パラメータ 10 億あたり 0.5 GB 強が目安です。
1 秒あたり何トークン出ますか?
文章を書く速さはメモリ帯域幅で決まります。トークンごとに、モデルのアクティブな重みを 1 回読み込むからです。帯域幅をトークンあたりの読み込みバイト数で割った値が 1 つの会話の上限で、実際にはその約 45%〜80% になるのが普通です。
なぜ Mixture of Experts(MoE)モデルは速いのですか?
多数のエキスパートをメモリに持ちながら、トークンごとに使うのはごく一部だけなので、1 トークンで読み込むバイト数がずっと少なくて済みます。メモリはモデル全体の分が必要ですが、速度ははるかに小さなモデル並みになります。
4 ビットで十分ですか?
ほとんどのモデルでは、4 ビットでも元に近い品質を保てます。4 ビットを下回ると品質は急に落ちやすくなるため、4 ビット未満の版には印を付けています。