Новинка NVIDIA B300 · серверы 288 ГБ HBM3e — от 4 019 $/мес. за GPU

Посмотреть B300

Открытая модель · Google · Apache 2.0

Запустите Gemma 4 31B
на собственных GPU.

Крупнейшая плотная модель Gemma 4 от Google, мультимодальная. 31B параметров, 63 ГБ официальных весов BF16.

  • 76 ГБВидеопамять, BF16
  • 38 ГБВидеопамять, FP8
  • 1× RTX 5090самый дешёвый сервер, Ollama
  • 329 $в месяц

Сколько видеопамяти требуется для Gemma 4 31B.

Веса × 1,2 для KV-кэша и активаций, с учётом того, что можно использовать 92% видеопамяти — это правило, которое использует страница оформления сервера. Для длинных контекстов и большого числа параллельных запросов нужно больше.

Видеопамять, необходимая для Gemma 4 31B, и самый дешёвый сервер
Вариант развёртыванияПамять GPUСамый дешёвый серверВ месяцДействие
vLLM, официальные веса BF16 76 ГБ 1× NVIDIA RTX PRO 6000 959 $/мес. Запустить
vLLM, FP8 38 ГБ 2× NVIDIA RTX 4090 538 $/мес. Запустить
Ollama + Open WebUI, gemma4:31b (квантованная сборка) 24 ГБ 1× NVIDIA RTX 5090 329 $/мес. Запустить

Веса: google/gemma-4-31B-it · 63 ГБ, BF16 · Ollama: gemma4:31b, 20 ГБ. Как мы оцениваем объём видеопамяти

На каких GPU можно запустить Gemma 4 31B.

Самый маленький сервер каждого типа GPU, на котором помещается модель, и его цена в месяц.

Число GPU, необходимое для Gemma 4 31B, по типам GPU
GPUBF16FP8OllamaЦена, BF16
NVIDIA B300288 ГБ HBM3e 1× 1× 1× 4 019 $/мес.
NVIDIA B200180 ГБ HBM3e 1× 1× 1× 3 439 $/мес.
AMD MI355X288 ГБ HBM3E н/д н/д 1× —
NVIDIA H200141 ГБ HBM3e 1× 1× 1× 2 279 $/мес.
NVIDIA H10080 ГБ HBM3 2× 1× 1× 3 558 $/мес.
NVIDIA RTX PRO 600096 ГБ GDDR7 ECC 1× 1× 1× 959 $/мес.
NVIDIA L40S48 ГБ GDDR6 ECC 2× 1× 1× 1 578 $/мес.
NVIDIA RTX 509032 ГБ GDDR7 4× 2× 1× 1 316 $/мес.
NVIDIA RTX 409024 ГБ GDDR6X 4× 2× 2× 1 076 $/мес.
NVIDIA RTX 508016 ГБ GDDR7 — 4× 2× —

н/д = поддержка ROCm для этой модели не подтверждена в vLLM или SGLang. — = больше самого большого сервера этого GPU. Подобрать другую модель

Gemma 4 31B можно запустить с предустановкой.

Выберите модель на шаге «ПО» страницы оформления сервера: мы установим её с выбранным вами движком без дополнительной платы.

  1. 1

    Выберите сервер

    Страница оформления сервера предлагает самый дешёвый сервер, на котором помещается модель, и меняет вариант при изменении точности или движка.

  2. 2

    Выберите движок

    vLLM предоставляет API, совместимый с OpenAI; Ollama с Open WebUI даёт приватный чат в браузере.

  3. 3

    Оплатите и войдите

    Оплатите месяц в BTC, ETH, USDT, XMR или LTC — без KYC. Ваш сервер будет онлайн менее чем через 10 минут после подтверждения платежа, с root-доступом по SSH.

Руководства: инференс LLM с vLLM · инференс LLM с SGLang · Ollama с Open WebUI · LLM на своём сервере · GPU-серверы для инференса LLM · первые шаги на сервере

Вопросы и ответы: Gemma 4 31B.

Все модели: открытые модели и их видеопамять.

Сколько видеопамяти нужно для Gemma 4 31B?

Около 76 ГБ видеопамяти, чтобы запускать официальные веса BF16 (63 ГБ) через vLLM, по нашему правилу «веса × 1,2» для KV-кэша и активаций; около 38 ГБ в FP8; около 24 ГБ со сборкой gemma4:31b от Ollama. Для длинных контекстов и большого числа параллельных запросов нужно больше.

Может ли Gemma 4 31B работать на одном GPU?

Да, на одном B300, B200, MI355X, H200, H100, RTX PRO 6000, L40S или RTX 5090 с Ollama + Open WebUI, gemma4:31b (квантованная сборка), по нашему правилу подбора.

Какой самый дешёвый сервер для Gemma 4 31B?

Самый дешёвый сервер CryptGPU для Gemma 4 31B — 1× NVIDIA RTX 5090 за 329 $ в месяц, с Ollama + Open WebUI, gemma4:31b (квантованная сборка). Модель можно предустановить бесплатно при заказе, а оплата — криптовалютой, без KYC.

Работает ли Gemma 4 31B на AMD MI355X?

Пока не подтверждена работа с vLLM или SGLang на ROCm, поэтому мы предлагаем её на серверах NVIDIA; через Ollama она также работает на MI355X.

Какая лицензия у Gemma 4 31B?

Apache 2.0. Мы загружаем официальные веса с Hugging Face (google/gemma-4-31B-it); ответственность за соблюдение лицензии лежит на вас.

Свой Gemma 4 31B, готовый за минуты.

Выделенные GPU, единая цена в месяц, модель предустановлена. Оплата криптовалютой, без KYC.

Личный кабинет

Войти в CryptGPU

Ваши заказы, счета и серверы в одном месте.

Новичок в CryptGPU?

Аккаунты создаются при оформлении заказа: выберите сервер и программное обеспечение, затем создайте аккаунт на шаге Аккаунт первого заказа.

Запустить сервер