Cohere🧠 DENSE
Command R
35B
ПАРАМЕТРЫ
22 ГБ
МИН._VRAM (Q4)
70 ГБ
МИН._VRAM (FP16)
128K
КОНТЕКСТ
💵 ЦЕНЫ_API (OPENROUTER)
ВХОД: $0.04/1M ток.ВЫХОД: $0.15/1M ток.
🖥 СОВМЕСТИМЫЕ_GPU (21)
GPU с ≥22 ГБ VRAM для запуска Command R в квантизации Q4_K_M
| GPU | VRAM | BANDWIDTH | TOK/S | ЦЕНА (НОВАЯ) | $/TOK/S |
|---|---|---|---|---|---|
| Gaudi 3 128GBIntel | 128 ГБ | 3700 ГБ/с | 143.6 | $15,000 | $104 |
| MI300X 192GBAMD | 192 ГБ | 5300 ГБ/с | 140.0 | $15,000 | $107 |
| H100 SXM 80GBNVIDIA | 80 ГБ | 3350 ГБ/с | 130.0 | $30,000 | $231 |
| H200 141GBNVIDIA | 141 ГБ | 4800 ГБ/с | 126.8 | $30,000 | $237 |
| MI250X 128GBAMD | 128 ГБ | 3200 ГБ/с | 124.2 | $12,000 | $97 |
| H100 PCIe 80GBNVIDIA | 80 ГБ | 2039 ГБ/с | 111.0 | $25,000 | $225 |
| A100 80GBNVIDIA | 80 ГБ | 2039 ГБ/с | 111.0 | $15,000 | $135 |
| A100 40GBNVIDIA | 40 ГБ | 1555 ГБ/с | 84.7 | $10,000 | $118 |
| RTX 5090 32GBNVIDIA | 32 ГБ | 1792 ГБ/с | 82.9 | $1,999 | $24 |
| L40S 48GBNVIDIA | 48 ГБ | 864 ГБ/с | 47.0 | $8,000 | $170 |
| L40 48GBNVIDIA | 48 ГБ | 864 ГБ/с | 47.0 | $6,500 | $138 |
| Mac M2 UltraApple | 192 ГБ | 800 ГБ/с | 43.6 | $7,000 | $161 |
| Mac M3 Ultra 192GBApple | 192 ГБ | 800 ГБ/с | 43.6 | $6,999 | $161 |
| RTX 4090 24GBNVIDIA | 24 ГБ | 1008 ГБ/с | 38.4 | $1,600 | $42 |
| A40 48GBNVIDIA | 48 ГБ | 696 ГБ/с | 37.9 | $5,000 | $132 |
| RX 7900 XTX 24GBAMD | 24 ГБ | 960 ГБ/с | 36.6 | $900 | $25 |
| RTX 3090 24GBNVIDIA | 24 ГБ | 936 ГБ/с | 35.7 | $900 | $25 |
| A30 24GBNVIDIA | 24 ГБ | 933 ГБ/с | 35.6 | $4,500 | $126 |
| Mac M4 MaxApple | 64 ГБ | 546 ГБ/с | 29.7 | $4,000 | $135 |
| A10 24GBNVIDIA | 24 ГБ | 600 ГБ/с | 22.9 | $3,500 | $153 |
| Mac M4 ProApple | 24 ГБ | 273 ГБ/с | 10.4 | $2,500 | $240 |