96 GB の M3 Ultra で何が動く?

73 個のオープンモデルのうち 43 個が快適に動きます。GPU は標準で 96 GB のうち約 72 GB を使え、メモリの読み込み速度は 819 GB/s。これが生成の速さを決めます。搭載モデル:Mac Studio (2025)。

快適に動く中でいちばん賢いQwen3.8 27B8ビット · 28.7 GB · 13–23 tok/s快適に動く中でいちばん大きいgpt-oss-120bネイティブ 4.25ビット · 65.3 GB · 137–243 tok/sコード向けQwen3 Coder Next6ビット · 65 GB · 154–273 tok/s

快適に動く 48

コンテキスト用の余裕を残して収まり、毎秒 10 トークン以上。

モデルバージョンメモリトークン/秒
Qwen3.8 27B27B · 知能 33.78ビット28.7 GB13–23
Nemotron 3.5 Bolt 74B A9B74B · アクティブ 9B · 知能 21.46ビット60.1 GB50–90
Qwen3.6 35B A3B35B · アクティブ 3B · 知能 18.28ビット37.2 GB115–205
Muse Glimmer 30B29.6B · 知能 17.58ビット31.5 GB12–21
Gemma 4 31B30.7B · 知能 14.78ビット32.6 GB11–20
Nemotron 3.5 Lightning 30B A3B30B · アクティブ 3B · 知能 12.98ビット31.9 GB115–205
Granite 4.2 30B30B · 知能 12.78ビット31.9 GB12–21
MiniCPM5 2B2.52B · 知能 12.58ビット2.7 GB137–243
gpt-oss-120b117B · アクティブ 5.1B · 知能 11.6ネイティブ 4.25ビット65.3 GB137–243
Qwen3.5 9B9B · 知能 11.28ビット9.6 GB38–68
Granite 4.2 8B8B · 知能 11.18ビット8.5 GB43–77
Qwen3 Coder Next80B · アクティブ 3B · 知能 9.26ビット65 GB154–273
Granite 4.2 3B3B · 知能 9.18ビット3.2 GB115–205
gpt-oss-20b21B · アクティブ 3.6B · 知能 9ネイティブ 4.25ビット13.8 GB194–345
Nemotron 3 Nano 30B A3B30B · アクティブ 3.5B · 知能 8.98ビット31.9 GB100–177
Gemma 4 E4B8B · 知能 8.98ビット8.5 GB77–137
Llama 4 Scout 17B-16E Instruct109B · アクティブ 17B · 知能 6.54ビット61.3 GB38–68
Ministral 3 8B8.9B · 知能 5.58ビット9.5 GB39–69
Nemotron 3 Nano 4B3.97B · 知能 4.88ビット4.2 GB88–156
GLM-4.5 Air106B · アクティブ 12B4ビット59.6 GB54–96
Qwen3 Coder 30B A3B Instruct30.5B · アクティブ 3.3B8ビット32.4 GB105–187
GLM-4.7 Flash30B · アクティブ 3B8ビット31.9 GB115–205
Qwen3.6 27B27B8ビット28.7 GB13–23
Gemma 4 26B A4B25.2B · アクティブ 3.8B8ビット26.8 GB92–164
Devstral Small 2 (24B)24B8ビット25.5 GB14–26
Magistral Small 1.2 (2509)24B8ビット25.5 GB14–26
Mistral Small 3.2 (24B)24B8ビット25.5 GB14–26
LFM2.5 24B A2B24B · アクティブ 2B8ビット25.5 GB176–312
Phi-4 Reasoning Vision 15B15B8ビット15.9 GB23–41
Phi-4 (14B)14B8ビット14.9 GB25–44
Gemma 4 12B Unified12B8ビット12.7 GB29–52
Qwen3 8B8.2B8ビット8.7 GB42–75
Llama 3.1 8B Instruct8B8ビット8.5 GB43–77
Gemma 4 E2B5.1B8ビット5.4 GB154–273
Qwen3.5 4B4B8ビット4.3 GB86–152
Phi-4 mini instruct3.8B8ビット4 GB92–164
Llama 3.2 3B Instruct3.21B8ビット3.4 GB108–193
SmolLM3 3B3B8ビット3.2 GB115–205
LFM2.5 2.6B2.69B8ビット2.9 GB127–226
Qwen3.5 2B2B8ビット2.1 GB176–312
Llama 3.2 1B Instruct1.23B8ビット1.3 GB284–504
Qwen3.5 0.8B0.8B8ビット0.9 GB410–728
Qwen3 0.6B0.6B8ビット0.6 GB614–1092
Qwen3.8 Flash Next180B · アクティブ 6B · 知能 39.82ビット 品質低め56.3 GB194–345
Qwen3.5 122B A10B122B · アクティブ 10B · 知能 15.63ビット 品質低め53.4 GB84–149
Mistral Small 4 (119B)119B · アクティブ 6.5B · 知能 11.33ビット 品質低め52.1 GB132–234
Ornith 1.5 122B122B · アクティブ 10B3ビット 品質低め53.4 GB84–149
Nemotron 3 Super 120B A12B120B · アクティブ 12B3ビット 品質低め52.5 GB70–124

動くが遅い 3

収まるものの毎秒 10 トークン未満。バッチ処理には十分ですが、チャットには遅めです。

モデルバージョンメモリトークン/秒
Llama 3.3 70B Instruct70B6ビット56.9 GB6–12
Mistral Medium 3.5 (128B)128B · 知能 14.23ビット 品質低め56 GB7–12
Devstral 2 (123B)123B3ビット 品質低め53.8 GB7–12

ぎりぎり収まる 1

メモリをほぼ使い切ります。GPU のメモリ上限を引き上げ、コンテキストを短めにしてください。

モデルバージョンメモリトークン/秒
MiniMax M2.7230B · アクティブ 10B2ビット 品質低め71.9 GB119–211

大きすぎる 21

2 ビットでも 96 GB を超えるメモリが必要です。

ほかの Mac

96 GB のすべての Mac(チップを問わず)。

メモリ容量違いの M3 Ultra:

近いチップ:

直接比較:

PC やグラフィックカードとの比較:

どの Mac や GPU とも比較 · ローカル AI のための M3 Ultra · ローカル LLM に最適な Mac · すべての Mac

よくある質問

96 GB の M3 Ultra に最適な LLM は?
Intelligence Index が公開されているモデルのうち、ここで快適に動く中でスコアが最も高いのは Qwen3.8 27B です:8ビット、毎秒約 13–23 トークン。快適に動くいちばん大きなモデルは gpt-oss-120b です。
96 GB の M3 Ultra で Llama 3.3 70B は動く?
はい、ただし遅めです。6ビット で、毎秒約 6–12 トークンです。
M3 Ultra での gpt-oss-20b の速さは?
毎秒約 194–345 トークン(ネイティブ 4.25ビット)。チップのメモリ帯域幅 819 GB/s から計算しています。

MLX Harness(無料、オープンソース)か、ターミナルで Apple の mlx-lm を使って動かせます:手順を見る。

計算方法

メモリ:モデルのパラメータを重みあたり 8、6、4、3、2 ビットで計算し、MLX のグループスケール(重みあたり 0.5 ビット)を加えたもの、またはネイティブ形式のサイズに、コンテキスト用の余裕を足しています。macOS は標準で、ユニファイドメモリの約 75% を GPU に使わせます。速度:メモリ帯域幅をトークンあたりの読み込みバイト数で割った値が、1 つの会話の上限です。llama.cpp の Apple Silicon 公開ベンチマークでは、実際の速度はその約 45%〜80% に達しており、その範囲を表示しています。これは実測ではなく推定です。ご自分の Mac は MLX Bench で測れます。モデルの数値は各公式モデルカード、チップの数値は Apple の技術仕様から。2026-10-19 確認。mlx.app/compare と同じデータです。

96 GB の M3 Ultra で動く LLM は?全モデルと速度