BTC
ETH
USDT
XMR
LTC
Открытая модель · Moonshot AI · Modified MIT
Запустите Kimi K2.6
на собственных GPU.
Агентная мультимодальная модель с нативными весами INT4. 1T MoE · 32B активных параметров, 595 ГБ официальных весов INT4.
- 714 ГБВидеопамять, INT4
- 1T MoE · 32B активныхпараметров
- 4× B300самый дешёвый сервер, INT4
- 16 076 $в месяц
Сколько видеопамяти требуется для Kimi K2.6.
Веса × 1,2 для KV-кэша и активаций, с учётом того, что можно использовать 92% видеопамяти — это правило, которое использует страница оформления сервера. Для длинных контекстов и большого числа параллельных запросов нужно больше.
| Вариант развёртывания | Память GPU | Самый дешёвый сервер | В месяц | Действие |
|---|---|---|---|---|
| vLLM или SGLang, официальные веса INT4 | 714 ГБ | 4× NVIDIA B300 | 16 076 $/мес. | Запустить |
Веса: moonshotai/Kimi-K2.6 · 595 ГБ, INT4. Как мы оцениваем объём видеопамяти
На каких GPU можно запустить Kimi K2.6.
Самый маленький сервер каждого типа GPU, на котором помещается модель, и его цена в месяц.
| GPU | INT4 | Цена, INT4 |
|---|---|---|
| NVIDIA B300288 ГБ HBM3e | 4× | 16 076 $/мес. |
| NVIDIA B200180 ГБ HBM3e | 8× | 27 512 $/мес. |
| AMD MI355X288 ГБ HBM3E | н/д | — |
| NVIDIA H200141 ГБ HBM3e | 8× | 18 232 $/мес. |
| NVIDIA H10080 ГБ HBM3 | — | — |
| NVIDIA RTX PRO 600096 ГБ GDDR7 ECC | — | — |
| NVIDIA L40S48 ГБ GDDR6 ECC | — | — |
| NVIDIA RTX 509032 ГБ GDDR7 | — | — |
| NVIDIA RTX 409024 ГБ GDDR6X | — | — |
| NVIDIA RTX 508016 ГБ GDDR7 | — | — |
н/д = поддержка ROCm для этой модели не подтверждена в vLLM или SGLang. — = больше самого большого сервера этого GPU. Подобрать другую модель
Kimi K2.6 можно запустить с предустановкой.
Выберите модель на шаге «ПО» страницы оформления сервера: мы установим её с выбранным вами движком без дополнительной платы.
- 1
Выберите сервер
Страница оформления сервера предлагает самый дешёвый сервер, на котором помещается модель, и меняет вариант при изменении точности или движка.
- 2
Выберите движок
vLLM или SGLang предоставляют API, совместимый с OpenAI.
- 3
Оплатите и войдите
Оплатите месяц в BTC, ETH, USDT, XMR или LTC — без KYC. Ваш сервер будет онлайн менее чем через 10 минут после подтверждения платежа, с root-доступом по SSH.
Руководства: инференс LLM с vLLM · инференс LLM с SGLang · Ollama с Open WebUI · LLM на своём сервере · GPU-серверы для инференса LLM · первые шаги на сервере
Вопросы и ответы: Kimi K2.6.
Все модели: открытые модели и их видеопамять.
Сколько видеопамяти нужно для Kimi K2.6?
Около 714 ГБ видеопамяти, чтобы запускать официальные веса INT4 (595 ГБ) через vLLM или SGLang, по нашему правилу «веса × 1,2» для KV-кэша и активаций. Для длинных контекстов и большого числа параллельных запросов нужно больше.
Может ли Kimi K2.6 работать на одном GPU?
Нет. Самый маленький сервер, на котором она помещается — 4× B300, с vLLM или SGLang, официальные веса INT4, по нашему правилу подбора.
Какой самый дешёвый сервер для Kimi K2.6?
Самый дешёвый сервер CryptGPU для Kimi K2.6 — 4× NVIDIA B300 за 16 076 $ в месяц, с vLLM или SGLang, официальные веса INT4. Модель можно предустановить бесплатно при заказе, а оплата — криптовалютой, без KYC.
Работает ли Kimi K2.6 на AMD MI355X?
Поддержка на ROCm пока не подтверждена, поэтому мы предлагаем её на серверах NVIDIA.
Какая лицензия у Kimi K2.6?
Modified MIT. Мы загружаем официальные веса с Hugging Face (moonshotai/Kimi-K2.6); ответственность за соблюдение лицензии лежит на вас.
Свой Kimi K2.6, готовый за минуты.
Выделенные GPU, единая цена в месяц, модель предустановлена. Оплата криптовалютой, без KYC.