精度ごとのメモリ
| バージョン | 重み | コンテキスト込み | 最小構成の Mac |
|---|---|---|---|
| 8ビット | 4.2 GB | 5.7 GB | 8 GB |
| 6ビット | 3.2 GB | 4.7 GB | 8 GB |
| 4ビット | 2.2 GB | 3.7 GB | 8 GB |
| 3ビット 品質低め | 1.7 GB | 3.2 GB | 8 GB |
| 2ビット 品質低め | 1.2 GB | 2.7 GB | 8 GB |
すべての Apple チップで
各チップで Nemotron-Labs Dory 1.0 4B が動く最小のメモリ容量、そこに収まる最適なバージョン、期待できる生成速度です。
| チップ | 必要量 | バージョン | トークン/秒 |
|---|---|---|---|
| M6 | 16 GB | 8ビット 快適 | 11–20 |
| M5 Ultra | 96 GB | 8ビット 快適 | 87–155 |
| M5 Max | 36 GB | 8ビット 快適 | 33–59 |
| M5 Pro | 24 GB | 8ビット 快適 | 22–40 |
| M5 | 16 GB | 8ビット 快適 | 11–20 |
| M4 Max | 36 GB | 8ビット 快適 | 30–53 |
| M4 Pro | 24 GB | 8ビット 快適 | 20–35 |
| M4 | 16 GB | 6ビット 快適 | 11–20 |
| M3 Ultra | 96 GB | 8ビット 快適 | 59–106 |
| M3 Max | 36 GB | 8ビット 快適 | 22–39 |
| M3 Pro | 18 GB | 8ビット 快適 | 11–19 |
| M3 | 8 GB | 6ビット 快適 | 10–17 |
| M2 Ultra | 64 GB | 8ビット 快適 | 58–103 |
| M2 Max | 32 GB | 8ビット 快適 | 29–52 |
| M2 Pro | 16 GB | 8ビット 快適 | 15–26 |
| M2 | 8 GB | 6ビット 快適 | 10–17 |
| M1 Ultra | 64 GB | 8ビット 快適 | 58–103 |
| M1 Max | 32 GB | 8ビット 快適 | 29–52 |
| M1 Pro | 16 GB | 8ビット 快適 | 15–26 |
| M1 | 8 GB | 8ビット 遅め | 5–9 |
他の人による実測
他の人が自分の Mac で実測し、公開した Nemotron-Labs Dory 1.0 4B の生成速度です。第三者による測定で、私たちの測定でも上の推定値でもありません。
| Mac | ランタイム | 精度 | デコード tok/s | 出典 |
|---|---|---|---|---|
| MacBook Pro M5 Max 128 GB | dory-mlx | 8-bit (MLX) | 69 | NetProjects @netprojects |
| MacBook Pro M5 Max 128 GB | dory-mlx | 8-bit (MLX) | 54コンテキスト 32K 時 | NetProjects @netprojects |
結果はランタイムと設定によって変わります。バージョン、精度、コンテキスト長、プロンプト、推論のオン・オフで速度が変わります。
動かし方
手順：Mac で LLM をダウンロードして動かす · MLX、Ollama、llama.cpp の比較
ターミナルよりアプリ派なら、AI App Store でローカルモデルを動かす Mac アプリを比較できます。価格、ライセンス、データの行き先まで。
Nemotron-Labs Dory 1.0 4B について
| 開発元 | NVIDIA |
|---|---|
| パラメータ | 3.98B（Dense） |
| コンテキスト | 256K トークン |
| ライセンス | OpenMDW-1.1 |
| 公開日 | 2026-10 |
| 入力 | テキスト |
| 重み | nvidia/NVIDIA-Nemotron-Labs-Dory1.0-4B-BF16 |
よくある質問
- Nemotron-Labs Dory 1.0 4B にはどれくらいのメモリが必要？
- 4ビット で重みが約 2.2 GB、これにコンテキスト用の余裕を足して合計 3.7 GB です。macOS は標準でユニファイドメモリの約 75% を GPU に使わせるため、Mac では 8 GB 以上のユニファイドメモリが必要です。
- Nemotron-Labs Dory 1.0 4B は Mac でどれくらい速い？
- 生成速度はメモリ帯域幅で決まります。ここで最速なのは 96 GB の M5 Ultra で、毎秒約 87–155 トークン（8ビット）。動かせる最小構成は 8 GB の M3 で、毎秒約 10–17 トークンです。
- 量子化で Nemotron-Labs Dory 1.0 4B の品質は落ちる？
- 4 ビットなら、ほとんどのモデルは元の品質に近いままです。4 ビットを下回ると品質は急に落ちます。お使いの Mac に余裕をもって収まる、いちばん高い精度を選んでください。
似たモデル
モデルカードや README に
Nemotron-Labs Dory 1.0 4B が快適に動く最小構成の Mac を表示し、このページにリンクします。
[](https://mlx.app/run/nemotron-labs-dory-1.0-4b)計算方法
メモリ：モデルのパラメータを重みあたり 8、6、4、3、2 ビットで計算し、MLX のグループスケール（重みあたり 0.5 ビット）を加えたもの、またはネイティブ形式のサイズに、コンテキスト用の余裕を足しています。macOS は標準で、ユニファイドメモリの約 75% を GPU に使わせます。速度：メモリ帯域幅をトークンあたりの読み込みバイト数で割った値が、1 つの会話の上限です。llama.cpp の Apple Silicon 公開ベンチマークでは、実際の速度はその約 45%〜80% に達しており、その範囲を表示しています。これは実測ではなく推定です。ご自分の Mac は MLX Bench で測れます。モデルの数値は各公式モデルカード、チップの数値は Apple の技術仕様から。2026-10-19 確認。mlx.app/compare と同じデータです。
オープンデータ: mlx.app/data (JSON, CSV)