लोकल AI साठी प्रत्येक M चिप.

कोणती मॉडेल्स बसतील ते मेमरी ठरवते; ती किती वेगाने लिहितील ते बँडविड्थ ठरवते. Apple च्या स्वतःच्या आकड्यांवरून, इथे प्रत्येक Apple Silicon चिप दोन्ही बाबतीत.

चिपयुनिफाइड मेमरीमेमरी बँडविड्थ4-bit वर सर्वात मोठे मॉडेल8B मॉडेल, मर्यादाया Mac मध्ये
M116 GB68 GB/sसुमारे 21B15 टोकन/सेकंदMacBook Air (2020), 13-inch MacBook Pro (2020), Mac mini (2020), iMac (2021)
M1 Pro32 GB200 GB/sसुमारे 42B44 टोकन/सेकंद14- and 16-inch MacBook Pro (2021)
M1 Max64 GB400 GB/sसुमारे 85B89 टोकन/सेकंद14- and 16-inch MacBook Pro (2021), Mac Studio (2022)
M1 Ultra128 GB800 GB/sसुमारे 170B178 टोकन/सेकंदMac Studio (2022)
M224 GB100 GB/sसुमारे 32B22 टोकन/सेकंदMacBook Air (2022, 2023), 13-inch MacBook Pro (2022), Mac mini (2023)
M2 Pro32 GB200 GB/sसुमारे 42B44 टोकन/सेकंद14- and 16-inch MacBook Pro (2023), Mac mini (2023)
M2 Max96 GB400 GB/sसुमारे 128B89 टोकन/सेकंद14- and 16-inch MacBook Pro (2023), Mac Studio (2023)
M2 Ultra192 GB800 GB/sसुमारे 256B178 टोकन/सेकंदMac Studio (2023), Mac Pro (2023)
M324 GB100 GB/sसुमारे 32B22 टोकन/सेकंदMacBook Air (2024), 14-inch MacBook Pro (2023), iMac (2023)
M3 Pro36 GB150 GB/sसुमारे 48B33 टोकन/सेकंद14- and 16-inch MacBook Pro (2023)
M3 Max128 GB400 GB/sसुमारे 170B89 टोकन/सेकंद14- and 16-inch MacBook Pro (2023)
M3 Ultra512 GB819 GB/sसुमारे 682B182 टोकन/सेकंदMac Studio (2025)
M432 GB120 GB/sसुमारे 42B27 टोकन/सेकंदMacBook Air (2025), 14-inch MacBook Pro (2024), Mac mini (2024), iMac (2024)
M4 Pro64 GB273 GB/sसुमारे 85B61 टोकन/सेकंदMac mini (2024), 14- and 16-inch MacBook Pro (2024)
M4 Max128 GB546 GB/sसुमारे 170B121 टोकन/सेकंद14- and 16-inch MacBook Pro (2024), Mac Studio (2025)
M532 GB153 GB/sसुमारे 42B34 टोकन/सेकंद14-inch MacBook Pro (2025), MacBook Air (2026)
M5 Pro64 GB307 GB/sसुमारे 85B68 टोकन/सेकंद14- and 16-inch MacBook Pro (2026), Mac mini (2026)
M5 Max128 GB614 GB/sसुमारे 170B136 टोकन/सेकंद14- and 16-inch MacBook Pro (2026), Mac Studio (2026)
M5 Ultra512 GB1.2 TB/sसुमारे 682B267 टोकन/सेकंदMac Studio (2026)
M632 GB170 GB/sसुमारे 42B38 टोकन/सेकंदMac mini (2026)

मर्यादा = मेमरी बँडविड्थ ÷ प्रत्येक टोकनसाठी वाचलेले बाइट्स; प्रत्यक्ष रन साधारणपणे त्याच्या 45% ते 80% पर्यंत पोहोचतात. सर्वात मोठे मॉडेल तीन-चतुर्थांश मेमरी वापरता येते असे गृहीत धरते. प्रत्येक चिपच्या पानावर स्रोत दिले आहेत.

स्रोत

  1. Apple: M1apple.com
  2. llama.cpp: Apple Silicon benchmarksgithub.com
  3. Apple: M1 Pro and M1 Maxapple.com
  4. Apple: M1 Ultraapple.com
  5. Apple: M2apple.com
  6. Apple: M2 Pro and M2 Maxapple.com
  7. Apple: M2 Ultraapple.com
  8. Apple: M3, M3 Pro and M3 Maxapple.com
  9. Apple: MacBook Pro (M3 Pro or M3 Max) specssupport.apple.com
  10. Apple: Mac Studio (2025) specssupport.apple.com
  11. Apple: Mac mini (2024) specssupport.apple.com
  12. Apple: M4 Pro and M4 Maxapple.com
  13. Apple: M5apple.com
  14. Apple: MacBook Air with M5apple.com
  15. Apple: M5 Pro and M5 Maxapple.com
  16. Apple: Mac mini (2026) specssupport.apple.com
  17. Apple: Mac Studio with M5 Max and M5 Ultraapple.com
  18. Apple: M6 and M5 Ultraapple.com
लोकल AI साठी प्रत्येक Apple Silicon चिपची तुलना | MLX