LLMRAM

Apple Silicon M2 Ultra (192GB unified memory): was läuft lokal?

Wenn Sie nach „Apple Silicon M2 Ultra (192GB unified memory) was kann es lokal ausführen“ suchen, finden Sie hier eine praktische Einschätzung auf Basis transparenter Annahmen.

  • Speichertyp: Unified Memory
  • Gesamtspeicher: 192 GiB
  • Bandbreite: 800 GB/s
  • Planungshinweis: Bei MoE/Multimodal bitte zusätzliche Sicherheitsreserve einplanen.

Modell-Fit-Tabelle auf Apple Silicon M2 Ultra (192GB unified memory)

Annahme: Standard-Kontext/Batch und Q4_K_M für jedes Modell.

ModellGeschätzte GesamtsummeUrteiltok/s (grob)Empf. Quantisierung
Qwen 3.8 27B20.91 GiBPasst29.89fp16
Qwen 3.8 Flash Next 125B78.66 GiBPasst134.49int8
MiniMax H3 33B22.45 GiBPasst24.45fp16
Qwen Image 2.15.38 GiBPasst115.28fp16
Kimi K31,823.65 GiBPasst nicht7.76Kein Fit
GLM 5.3 (Flash)215.7 GiBPasst nicht44.83q3_k_m
DeepSeek V4.1 Flash334.25 GiBPasst nicht50.43q2_k
MiMo V2.6 Pro RL625.89 GiBPasst nicht19.21Kein Fit
Bonsai 2 27B21.13 GiBPasst29.49fp16
Mistral 7B Instruct v0.35.83 GiBPasst115.28fp16

Kurzantwort: Was kann Apple Silicon M2 Ultra (192GB unified memory)?

Apple Silicon M2 Ultra (192GB unified memory) kann im Basisprofil 6 von 10 Modellen ausführen.

Bei MoE/Multimodal bitte zusätzliche Sicherheitsreserve einplanen.

FAQ

Was kann Apple Silicon M2 Ultra (192GB unified memory) lokal ausführen?

Nutzen Sie die Q4_K_M-Baseline als erste Einschätzung. Für lange Kontexte oder multimodale Pipelines sollte zusätzlicher Puffer eingeplant werden.

Sind CPU/RAM-Offload-Szenarien enthalten?

Die Tabelle zeigt den Baseline-Fit. Mit partiellem Offload lassen sich größere Modelle laden, meist mit weniger Durchsatz.

Wie ist Unified Memory auf Macs zu bewerten?

Unified Memory wird als gleichwertiges Ziel modelliert. Die Reaktionsgeschwindigkeit hängt trotzdem stark von Bandbreite und Runtime ab.

Quelle und Verifikation

Hardware-Spezifikation: Apple Mac Studio specs (abgerufen 2026-10-06).