Открытая модель · Mistral AI · Apache 2.0
Запустите Devstral Small 2
на собственных GPU.
Модель Mistral для агентов кодирования в IDE и CLI. 24B параметров, 26 ГБ официальных весов FP8.
- 31 ГБВидеопамять, FP8
- 24Bпараметров
- 1× RTX 4090самый дешёвый сервер, Ollama
- 269 $в месяц
Сколько видеопамяти требуется для Devstral Small 2.
Веса × 1,2 для KV-кэша и активаций, с учётом того, что можно использовать 92% видеопамяти — это правило, которое использует страница оформления сервера. Для длинных контекстов и большого числа параллельных запросов нужно больше.
| Вариант развёртывания | Память GPU | Самый дешёвый сервер | В месяц | Действие |
|---|---|---|---|---|
| vLLM или SGLang, официальные веса FP8 | 31 ГБ | 2× NVIDIA RTX 4090 | 538 $/мес. | Запустить |
| Ollama + Open WebUI, devstral-small-2:24b (квантованная сборка) | 18 ГБ | 1× NVIDIA RTX 4090 | 269 $/мес. | Запустить |
Веса: mistralai/Devstral-Small-2-24B-Instruct-2512 · 26 ГБ, FP8 · Ollama: devstral-small-2:24b, 15 ГБ. Как мы оцениваем объём видеопамяти
На каких GPU можно запустить Devstral Small 2.
Самый маленький сервер каждого типа GPU, на котором помещается модель, и его цена в месяц.
| GPU | FP8 | Ollama | Цена, FP8 |
|---|---|---|---|
| NVIDIA B300288 ГБ HBM3e | 1× | 1× | 4 019 $/мес. |
| NVIDIA B200180 ГБ HBM3e | 1× | 1× | 3 439 $/мес. |
| AMD MI355X288 ГБ HBM3E | н/д | 1× | — |
| NVIDIA H200141 ГБ HBM3e | 1× | 1× | 2 279 $/мес. |
| NVIDIA H10080 ГБ HBM3 | 1× | 1× | 1 779 $/мес. |
| NVIDIA RTX PRO 600096 ГБ GDDR7 ECC | 1× | 1× | 959 $/мес. |
| NVIDIA L40S48 ГБ GDDR6 ECC | 1× | 1× | 789 $/мес. |
| NVIDIA RTX 509032 ГБ GDDR7 | 2× | 1× | 658 $/мес. |
| NVIDIA RTX 409024 ГБ GDDR6X | 2× | 1× | 538 $/мес. |
| NVIDIA RTX 508016 ГБ GDDR7 | 4× | 2× | 796 $/мес. |
н/д = поддержка ROCm для этой модели не подтверждена в vLLM или SGLang. — = больше самого большого сервера этого GPU. Подобрать другую модель
Devstral Small 2 можно запустить с предустановкой.
Выберите модель на шаге «ПО» страницы оформления сервера: мы установим её с выбранным вами движком без дополнительной платы.
- 1
Выберите сервер
Страница оформления сервера предлагает самый дешёвый сервер, на котором помещается модель, и меняет вариант при изменении точности или движка.
- 2
Выберите движок
vLLM или SGLang предоставляют API, совместимый с OpenAI; Ollama с Open WebUI даёт приватный чат в браузере.
- 3
Оплатите и войдите
Оплатите месяц в BTC, ETH, USDT, XMR или LTC — без KYC. Ваш сервер будет онлайн менее чем через 10 минут после подтверждения платежа, с root-доступом по SSH.
Из блога: Свой ИИ-ассистент для программирования: приватный Copilot на GPU-сервере
Руководства: инференс LLM с vLLM · инференс LLM с SGLang · Ollama с Open WebUI · LLM на своём сервере · GPU-серверы для инференса LLM · первые шаги на сервере
Вопросы и ответы: Devstral Small 2.
Все модели: открытые модели и их видеопамять.
Сколько видеопамяти нужно для Devstral Small 2?
Около 31 ГБ видеопамяти, чтобы запускать официальные веса FP8 (26 ГБ) через vLLM или SGLang, по нашему правилу «веса × 1,2» для KV-кэша и активаций; около 18 ГБ со сборкой devstral-small-2:24b от Ollama. Для длинных контекстов и большого числа параллельных запросов нужно больше.
Может ли Devstral Small 2 работать на одном GPU?
Да, на одном B300, B200, MI355X, H200, H100, RTX PRO 6000, L40S, RTX 5090 или RTX 4090 с Ollama + Open WebUI, devstral-small-2:24b (квантованная сборка), по нашему правилу подбора.
Какой самый дешёвый сервер для Devstral Small 2?
Самый дешёвый сервер CryptGPU для Devstral Small 2 — 1× NVIDIA RTX 4090 за 269 $ в месяц, с Ollama + Open WebUI, devstral-small-2:24b (квантованная сборка). Модель можно предустановить бесплатно при заказе, а оплата — криптовалютой, без KYC.
Работает ли Devstral Small 2 на AMD MI355X?
Пока не подтверждена работа с vLLM или SGLang на ROCm, поэтому мы предлагаем её на серверах NVIDIA; через Ollama она также работает на MI355X.
Какая лицензия у Devstral Small 2?
Apache 2.0. Мы загружаем официальные веса с Hugging Face (mistralai/Devstral-Small-2-24B-Instruct-2512); ответственность за соблюдение лицензии лежит на вас.
Свой Devstral Small 2, готовый за минуты.
Выделенные GPU, единая цена в месяц, модель предустановлена. Оплата криптовалютой, без KYC.
