Запуск за ~30 с
Образ закэширован заранее, порты проброшены, TLS терминирован — стек уже работает, пока вы дочитываете это предложение.
Продукты
Разработчики & компания
GPU · по требованию, в час
Шаблон · Обучение и файнтюнинг · CUDA 12.6
Дообучение Llama, Qwen или Mistral из одного YAML-файла — LoRA, QLoRA и мульти-GPU FSDP. Axolotl файнтюнит Llama, Qwen, Mistral и другие модели из одного YAML: LoRA, QLoRA, полный файнтюнинг, DeepSpeed и FSDP, форматы датасетов обрабатываются автоматически. Это тот самый шаблон, для которого написано наше пошаговое руководство по QLoRA, — чекпоинты сохраняются на том, а инстанс с тренером — одноразовый. От $0,177/ч на прерываемом RTX 4090.
Образ закэширован заранее, порты проброшены, TLS терминирован — стек уже работает, пока вы дочитываете это предложение.
Вы платите только цену GPU: Axolotl — Файнтюнинг на RTX 4090 стоит $0,354/ч по требованию, $0,177/ч прерываемый, тарификация посекундная.
Модели, датасеты и результаты хранятся на томе по $0,08/GB/мес.; сам инстанс остаётся одноразовым.
Выделенный GPU, зашифрованный диск, оплата криптой, без KYC, без сохранения IP-адресов — Jupyter и SSH с вашими собственными учётными данными.
Три ценовых уровня, хорошо подходящих для этого шаблона, — Хороший, Лучший, Самый лучший. Подходит любая модель GPU из каталога; это оптимальные по цене варианты.
| Уровень | GPU | VRAM | По требованию | Прерываемые | Почему эта карта | Действие |
|---|---|---|---|---|---|---|
| Хороший | RTX 4090 | 24 GB | $0,354 | $0,177 | QLoRA для моделей 8B–13B на 24 GB за пару долларов. | Развернуть |
| Лучший | A100 SXM4 | 80 GB | $0,468 | $0,234 | 80 GB с NVLink для полных файнтюнов и 8× FSDP. | Развернуть |
| Самый лучший | H100 PCIE | 80 GB | $1,811 | $0,905 | 80 GB + FP8 — полные файнтюны примерно за половину реального времени A100. | Развернуть |
Нужно больше VRAM? Полный каталог перечисляет все модели с доступностью в реальном времени — всего: 83; руководство по VRAM подбирает карту под модель.
Откройте консоль, выберите шаблон в панели развёртывания, или сделайте это через скрипт:
$ lowcostgpu launch --gpu rtx-4090 --template axolotl-fine-tuning \
--disk 100 --volume models:/workspace/models
✓ instance i-7a41c0e2 running (27.9s)
# Axolotl — Файнтюнинг · RTX 4090 · $0,354/hr · per second
# https://i-7a41c0e2.lowcostgpu.com:8888 (TLS)
$ lowcostgpu stop i-7a41c0e2 # billing ends this second
| Образ | axolotlai/axolotl-cloud |
|---|---|
| CUDA | CUDA 12.6 |
| Доступ | также собирается под ARM · shell по SSH · JupyterLab на проброшенном порту |
| Категория | Обучение и файнтюнинг |
| Хранилище | NVMe-диск инстанса (размер задаётся при развёртывании) + опциональные сетевые тома |
| Биллинг | Только цена GPU, посекундно — без платы за шаблон, без платы за подключение |
Переменные окружения, порты и пользовательские образы описаны в документации по шаблонам.
Только цена GPU — шаблон бесплатен. От $0,177/ч на прерываемом RTX 4090, $0,354/ч по требованию на RTX 4090. Тарификация посекундная, поэтому час экспериментов стоит час, а не день. Хранилище — $0,08/GB/мес.
Около 30 секунд с момента клика по кнопке «Развернуть»: образ заранее закэширован на машинах, порты проброшены, а TLS терминирован. Перезапуск остановленного инстанса быстрее, а диск остаётся точно таким, каким вы его оставили.
Да — подключите том при развёртывании. Всё на томе переживает уничтожение инстанса и монтируется на следующий инстанс в регионе за секунды, по цене $0,08/GB/мес. Сам диск инстанса переживает остановку/запуск, но не уничтожение.
Около 1,5 часа для 10 тыс. пар инструкций на Llama 3.1 8B на одной RTX 4090; QLoRA для 70B на карте с 80 GB — задача на ночь. В руководстве приведены точные конфигурации и расходы.
Пополните баланс в криптовалюте, сравните нас с текущим провайдером. Посекундная тарификация, фиксированные цены ≥ 30 % ниже рынка — для отмены достаточно остановить инстанс.