Welche GPU für Gemma 2 27B lokal?
Gemma 2 27B hat 27 Mrd. Parameter. Diese GPUs können das Modell in mindestens einer praktikablen Quantisierung fahren — sortiert nach Preis pro GB VRAM.
| GPU | beste Quant | VRAM-Bedarf | Tokens/Sek | Preis | €/GB |
|---|
Gemma 2 27B hat 27 Mrd. Parameter. Diese GPUs können das Modell in mindestens einer praktikablen Quantisierung fahren — sortiert nach Preis pro GB VRAM.
| GPU | beste Quant | VRAM-Bedarf | Tokens/Sek | Preis | €/GB |
|---|