Open WebUI Virtual Machine
Open WebUI Virtual Machine — преднастроенный облачный сервер с готовым инструментом для развертывания больших языковых моделей (LLM) и работы с ними через веб‑интерфейс. Инструмент ориентирован на технических специалистов, которым нужны полный контроль над обрабатываемыми данными и поддержка расширенного RAG.
Образ, из которого развертывается сервер, содержит:
-
Open WebUI — расширяемый веб-интерфейс для работы с LLM, который поддерживает Ollama и API, совместимые с OpenAI;
-
Ollama — платформу для локальной загрузки и запуска LLM;
-
Docker — платформу для запуска контейнеризированных приложений;
-
драйверы, необходимые для работы с графическими процессорами (GPU).
Вы можете создать Open WebUI Virtual Machine с GPU или без GPU. В сервере без GPU Open WebUI работает как интерфейс для подключения к внешним LLM — запущенным на других серверах или через API. Ollama устанавливается автоматически только при создании сервера с GPU.
Решаемые задачи
- развертывание LLM с полным контролем над обрабатываемыми данными;
- управление доступом к веб‑интерфейсу;
- взаимодействие с LLM через чат-бот;
- работа с внешними источниками данных через встроенный RAG.
Минимальные требования к ресурсам
* Ollama устанавливается автоматически только при создании сервера с GPU.
Без GPU Open WebUI работает как интерфейс для подключения к внешним LLM — запущенным на других серверах или через API.
Создать облачный сервер c Open WebUI
-
В панели управления в верхнем меню нажмите Продукты и выберите AI-маркетплейс.
-
Нажмите Создать сервер.
-
Заполните блоки:
- Имя и расположение;
- Источник;
- опционально: GPU;
- Конфигурация;
- Диски;
- Сеть;
- опционально: Доступ;
- опционально: Дополнительные настройки;
- опционально: Автоматизация.
-
Проверьте цену сервера.
-
Нажмите Создать сервер.
Имя и расположение
-
Введите имя сервера.
-
Выберите локацию, в которой будет создан сервер. От локации зависит список доступных GPU. После создания сервера изменить локацию нельзя.
Источник
Выберите образ Open WebUI VM (Ubuntu 24.04 LTS 64-bit).
Опционально: GPU
-
Нажмите Добавить GPU.
-
Выберите тип GPU. При выборе GPU учитывайте требования к ML-моделям и используемым инструментам. Характеристики и описание GPU можно посмотреть в инструкции Графические процессоры (GPU).