Общая информация о продукте Платформа обработки данных

Платформа обработки данных (Big Data Platform) — решение на базе партнерского продукта ITS Data Processing Platform с размещением на серверах Selectel. Платформа предназначена для сбора, хранения и подготовки к анализу больших объемов данных.

Можно создать платформу с нуля на серверах Selectel или модернизировать вашу платформу данных с переездом на серверы Selectel.

Решение включает:

  • подбор, предоставление и обслуживание серверов Selectel;
  • развертывание и кастомизацию платформы под ваши требования;
  • обслуживание и мониторинг платформы.

Подключить платформу

Для подключения платформы оставьте заявку на сайте. Мы подберем конфигурацию платформы и рассчитаем стоимость.

Конфигурация платформы

Для размещения платформы требуется аренда минимум четырех выделенных серверов. Операционная система — CentOS 7.

Компоненты платформы используют свободное программное обеспечение и технологии для работы с большими данными и построения аналитических систем.

Компоненты платформы

  • Apache Kafka (версия 2.4.1) — пакетный брокер для доставки сообщений в режиме реального времени;
  • Apache Spark (версия 2.4.7) — фреймворк для потоковой обработки данных в режиме реального времени;
  • Apache Airflow — программное обеспечение для создания, мониторинга и пакетной обработки данных;
  • Apache Hadoop (версия 2.10.1) — фреймворк для распределенной обработки больших объемов данных в кластерах компьютеров;
  • Greenplum (версия 6.9.0) — реляционная СУБД с массово-параллельной архитектурой для хранения структурированных данных;
  • ClickHouse — колоночная аналитическая СУБД для обработки больших объемов данных в режиме реального времени;
  • Apache Superset — веб-приложение для создания отчетов и дашбордов на основе готовых запросов.

Стоимость

Платформа обработки данных оплачивается с Основного баланса каждый месяц. Стоимость платформы зависит от количества серверов и будет рассчитана после обработки заявки и подбора конфигурации.