精度ごとのメモリ
| バージョン | 重み | コンテキスト込み | 最小構成の Mac |
|---|---|---|---|
| 8ビット | 128 GB | 138 GB | 192 GB |
| 6ビット | 97.5 GB | 105 GB | 192 GB |
| 4ビット | 67.5 GB | 72.9 GB | 128 GB |
| 3ビット 品質低め | 52.5 GB | 56.7 GB | 96 GB |
| 2ビット 品質低め | 37.5 GB | 40.5 GB | 64 GB |
すべての Apple チップで
各チップで Nemotron 3 Super 120B A12B が動く最小のメモリ容量、そこに収まる最適なバージョン、期待できる生成速度です。
| チップ | 必要量 | バージョン | トークン/秒 |
|---|---|---|---|
| M6 | 収まる容量なし | 大きすぎ | – |
| M5 Ultra | 256 GB | 8ビット 快適 | 42–75 |
| M5 Max | 128 GB | 4ビット 快適 | 41–72 |
| M5 Pro | 64 GB | 2ビット 快適 | 36–65 |
| M5 | 収まる容量なし | 大きすぎ | – |
| M4 Max | 128 GB | 4ビット 快適 | 36–64 |
| M4 Pro | 64 GB | 2ビット 快適 | 32–57 |
| M4 | 収まる容量なし | 大きすぎ | – |
| M3 Ultra | 256 GB | 8ビット 快適 | 29–51 |
| M3 Max | 128 GB | 4ビット 快適 | 26–47 |
| M3 Pro | 収まる容量なし | 大きすぎ | – |
| M3 | 収まる容量なし | 大きすぎ | – |
| M2 Ultra | 128 GB | 4ビット 快適 | 53–94 |
| M2 Max | 64 GB | 2ビット 快適 | 47–84 |
| M2 Pro | 収まる容量なし | 大きすぎ | – |
| M2 | 収まる容量なし | 大きすぎ | – |
| M1 Ultra | 128 GB | 4ビット 快適 | 53–94 |
| M1 Max | 64 GB | 2ビット 快適 | 47–84 |
| M1 Pro | 収まる容量なし | 大きすぎ | – |
| M1 | 収まる容量なし | 大きすぎ | – |
動かし方
- いちばん簡単な方法:無料でオープンソースの MLX Harness をダウンロードします。Nemotron 3 Super 120B A12B を検索し、お使いの Mac に合うバージョンをダウンロードすれば、すぐにチャットできます。OpenAI 互換 API で、ほかのアプリにモデルを提供することもできます。MLX Harness をダウンロード無料 · Apple Silicon · macOS 14.5 以降
- ターミナルで Apple の MLX を使う:
pip install mlx-lmmlx_lm.chat --model mlx-community/NVIDIA-Nemotron-3-Super-120B-A12B-4bitビルド:Hugging Face の mlx-community/NVIDIA-Nemotron-3-Super-120B-A12B-4bit。ほかの精度も同じ場所にあります。
手順:Mac で LLM をダウンロードして動かす · MLX Harness の使い方 · MLX、Ollama、llama.cpp の比較
Nemotron 3 Super 120B A12B について
| 開発元 | NVIDIA |
|---|---|
| パラメータ | 合計 120B · アクティブ 12B(Mixture of Experts) |
| コンテキスト | 256K トークン |
| ライセンス | NVIDIA Nemotron Open Model License |
| 公開日 | 2026-03 |
| 入力 | テキスト |
| 重み | nvidia/NVIDIA-Nemotron-3-Super-120B-A12B-BF16 |
よくある質問
- Nemotron 3 Super 120B A12B にはどれくらいのメモリが必要?
- 4ビット で重みが約 67.5 GB、これにコンテキスト用の余裕を足して合計 72.9 GB です。macOS は標準でユニファイドメモリの約 75% を GPU に使わせるため、Mac では 128 GB 以上のユニファイドメモリが必要です。
- Nemotron 3 Super 120B A12B は Mac でどれくらい速い?
- 生成速度はメモリ帯域幅で決まります。ここで最速なのは 128 GB の M2 Ultra で、毎秒約 53–94 トークン(4ビット)。動かせる最小構成は 128 GB の M2 Ultra で、毎秒約 53–94 トークンです。
- Nemotron 3 Super 120B A12B がサイズのわりに速いのはなぜ?
- Mixture of Experts(MoE)モデルだからです。メモリには 120B のパラメータを置きますが、トークンごとに読み込むのは 12B だけなので、はるかに小さなモデル並みの速度で生成します。
似たモデル
モデルカードや README に
Nemotron 3 Super 120B A12B が快適に動く最小構成の Mac を表示し、このページにリンクします。
[](https://mlx.app/run/nemotron-3-super-120b-a12b)計算方法
メモリ:モデルのパラメータを重みあたり 8、6、4、3、2 ビットで計算し、MLX のグループスケール(重みあたり 0.5 ビット)を加えたもの、またはネイティブ形式のサイズに、コンテキスト用の余裕を足しています。macOS は標準で、ユニファイドメモリの約 75% を GPU に使わせます。速度:メモリ帯域幅をトークンあたりの読み込みバイト数で割った値が、1 つの会話の上限です。llama.cpp の Apple Silicon 公開ベンチマークでは、実際の速度はその約 45%〜80% に達しており、その範囲を表示しています。これは実測ではなく推定です。ご自分の Mac は MLX Bench で測れます。モデルの数値は各公式モデルカード、チップの数値は Apple の技術仕様から。2026-10-19 確認。mlx.app/compare と同じデータです。