Google🧠 Dense
Gemma 3 12B
12B
Параметры
8 ГБ
Мин. VRAM (Q4)
24 ГБ
Мин. VRAM (FP16)
8K
Контекст
💵 Цены API (OpenRouter)
Вход: $0.04/1M ток.Выход: $0.13/1M ток.
🖥 Совместимые GPU (34)
GPU с ≥8 ГБ VRAM для запуска Gemma 3 12B в квантизации Q4_K_M
| GPU | VRAM | Пропускная | tok/s | Цена (новая) | $/tok/s |
|---|---|---|---|---|---|
| Gaudi 3 128GBIntel | 128 ГБ | 3700 ГБ/с | 220.9 | $15,000 | $68 |
| MI300X 192GBAMD | 192 ГБ | 5300 ГБ/с | 220.0 | $15,000 | $68 |
| H100 SXM 80GBNVIDIA | 80 ГБ | 3350 ГБ/с | 200.0 | $30,000 | $150 |
| H200 141GBNVIDIA | 141 ГБ | 4800 ГБ/с | 199.2 | $30,000 | $151 |
| MI250X 128GBAMD | 128 ГБ | 3200 ГБ/с | 191.0 | $12,000 | $63 |
| H100 PCIe 80GBNVIDIA | 80 ГБ | 2039 ГБ/с | 170.0 | $25,000 | $147 |
| A100 80GBNVIDIA | 80 ГБ | 2039 ГБ/с | 130.0 | $15,000 | $115 |
| RTX 5090 32GBNVIDIA | 32 ГБ | 1792 ГБ/с | 120.0 | $1,999 | $17 |
| A100 40GBNVIDIA | 40 ГБ | 1555 ГБ/с | 110.0 | $10,000 | $91 |
| RTX 4090 24GBNVIDIA | 24 ГБ | 1008 ГБ/с | 95.0 | $1,600 | $17 |
| RTX 5070 Ti 16GBNVIDIA | 16 ГБ | 896 ГБ/с | 93.3 | $749 | $8 |
| L40S 48GBNVIDIA | 48 ГБ | 864 ГБ/с | 90.0 | $8,000 | $89 |
| L40 48GBNVIDIA | 48 ГБ | 864 ГБ/с | 90.0 | $6,500 | $72 |
| RX 7900 XT 20GBAMD | 20 ГБ | 800 ГБ/с | 76.1 | $799 | $10 |
| Mac M2 UltraApple | 192 ГБ | 800 ГБ/с | 76.1 | $7,000 | $92 |
| Mac M3 Ultra 192GBApple | 192 ГБ | 800 ГБ/с | 76.1 | $6,999 | $92 |
| RTX 4080 SUPER 16GBNVIDIA | 16 ГБ | 736 ГБ/с | 70.0 | $999 | $14 |
| RTX 4080 16GBNVIDIA | 16 ГБ | 717 ГБ/с | 68.2 | $1,000 | $15 |
| RTX 5080 16GBNVIDIA | 16 ГБ | 960 ГБ/с | 66.7 | $999 | $15 |
| RX 7900 XTX 24GBAMD | 24 ГБ | 960 ГБ/с | 66.7 | $900 | $13 |
| RTX 3090 24GBNVIDIA | 24 ГБ | 936 ГБ/с | 65.0 | $900 | $14 |
| A30 24GBNVIDIA | 24 ГБ | 933 ГБ/с | 64.8 | $4,500 | $69 |
| A40 48GBNVIDIA | 48 ГБ | 696 ГБ/с | 62.1 | $5,000 | $81 |
| RTX 3080 10GBNVIDIA | 10 ГБ | 760 ГБ/с | 61.4 | $600 | $10 |
| RTX 5070 12GBNVIDIA | 12 ГБ | 672 ГБ/с | 60.0 | $549 | $9 |
| RTX 4070 Ti SUPER 16GBNVIDIA | 16 ГБ | 672 ГБ/с | 60.0 | $799 | $13 |
| RX 7800 XT 16GBAMD | 16 ГБ | 624 ГБ/с | 55.7 | $499 | $9 |
| A10 24GBNVIDIA | 24 ГБ | 600 ГБ/с | 49.5 | $3,500 | $71 |
| Mac M4 MaxApple | 64 ГБ | 546 ГБ/с | 45.0 | $4,000 | $89 |
| RTX 4070 Ti 12GBNVIDIA | 12 ГБ | 504 ГБ/с | 41.5 | $700 | $17 |
| RTX 4070 SUPER 12GBNVIDIA | 12 ГБ | 504 ГБ/с | 41.5 | $599 | $14 |
| RTX 4060 Ti 16GBNVIDIA | 16 ГБ | 288 ГБ/с | 36.9 | $499 | $14 |
| Mac M4 ProApple | 24 ГБ | 273 ГБ/с | 35.0 | $2,500 | $71 |
| Mac M4 16GBApple | 16 ГБ | 120 ГБ/с | 15.4 | $1,199 | $78 |