El M3 Pro para IA local.

El M3 Pro tiene hasta 36 GB de memoria unificada, que lee a hasta 150 GB/s. Esto es lo que significa para ejecutar modelos de lenguaje en una Mac con este chip, calculado a partir de las propias cifras de Apple.

1Las especificaciones que importan para la IA

Memoria unificada36 GB
Ancho de banda de memoria150 GB/s
Está en14- and 16-inch MacBook Pro (2023)
Plaza dedicada para élPlaza Pro: mina hasta 80 MLX al día

2Qué modelos caben

A 4 bits por peso, un modelo necesita algo más de medio gigabyte por cada mil millones de parámetros, más espacio para su contexto y para macOS. Con 36 GB, el M3 Pro aloja con holgura modelos de hasta unos 48 mil millones de parámetros.

Modelo a 4 bitsMemoria necesariaCabe en el M3 Pro
Modelo de 8B4,5 GBSí
Modelo de 14B7,9 GBSí
Modelo de 32B18 GBSí
Modelo de 70B39,4 GBNo
gpt-oss-120b, mezcla de expertos65 GBNo
Qwen3.5-397B-A17B, mezcla de expertos223,3 GBNo
DeepSeek-V4.1-Flash, mezcla de expertos316 GBNo

3Qué velocidad alcanza

Al escribir texto, el límite es el ancho de banda de memoria: cada token nuevo lee una vez los pesos activos del modelo. Al dividir los 150 GB/s del M3 Pro entre los bytes leídos por token se obtiene el techo de abajo. En la práctica se suele llegar a entre el 45% y el 80% de ese techo (benchmarks de llama.cpp).

Modelo a 4 bitsLectura por tokenTecho para un chat
Modelo de 8B4,5 GB33 tokens/s
Modelo de 14B7,9 GB19 tokens/s
Modelo de 32B18 GB8 tokens/s

5Compara con otros chips

6Preguntas

¿Puede el M3 Pro ejecutar un modelo de 70B?
No con holgura. Un modelo de 70B a 4 bits necesita unos 40 GB, y el M3 Pro tiene como máximo 36 GB. Los modelos de hasta unos 48 mil millones de parámetros caben bien.
¿Cuántos tokens por segundo da el M3 Pro?
Con un modelo de 8B a 4 bits, el techo es de unos 33 tokens por segundo, y en la práctica se alcanza entre la mitad y cuatro quintos. Los modelos más grandes son proporcionalmente más lentos.
¿Es bueno el M3 Pro para IA?
Para ejecutar modelos en local, lo que más importa es la memoria y el ancho de banda. El M3 Pro tiene hasta 36 GB a 150 GB/s, suficiente para modelos de hasta unos 48 mil millones de parámetros. Además puede ganar ejecutando trabajos de IA para MLX Network con MLX Node.

Fuentes

  1. Apple: M3, M3 Pro and M3 Maxapple.com
  2. Apple: MacBook Pro (M3 Pro or M3 Max) specssupport.apple.com
M3 Pro para LLM locales: memoria, velocidad y qué cabe | MLX