RT.Streaming

Инструмент для эффективного управления процессами изменения, выгрузки и загрузки данных, позволяющий настроить потоковую или пакетную обработку данных из различных источников.

Решает задачи корпоративной шины обмена данными: способен получать и обрабатывать данные из многочисленных внешних систем, хранить их в течение нужного для бизнеса периода времени и возвращать потребителям с удобной для них нагрузкой.

Ключевые функции и возможности

Обеспечивает безостановочный и отказоустойчивый обмен данными между различными системами компании, позволяет:

строить потоковые конвейеры данных в реальном времени, которые надежно передают данные между системами или приложениями

разрабатывать потоковые приложения в реальном времени, которые преобразуют или реагируют на потоки данных

хранить потоки записей, задавая нужный период хранения данных

разграничивать права доступа к потокам данных, изолируя критически важную информацию от несанкционированного доступа
Предоставляет возможности создания событийной архитектуры.
Имеет визуальный интерфейс, позволяющий соединить различные источники и потребителей данных, организовать pipe-line и запланировать регулярность его выполнения.
Позволяет организовать планирование сложных последовательностей задач с помощью создания направленных ацикличных графов (DAG) и отслеживать статус выполнения.
Гибкость и масштабируемость системы: всегда можно добавить в кластер новые серверы без остановки работы системы или же исключить ненужные.

Состав компонентов

Компонент	Версия
Kafka	2.7.0
Nifi	1.12.1
Airflow	1.0 или 2.0

Преимущества

Техническая поддержка и консультации пользователей на русском языке, полноценный комплект технической и эксплуатационной документации.

Гибкие варианты поставки и развертывания решения: от самостоятельной установки дистрибутива в инфраструктуре Заказчика до использования готового решения в облачной инфраструктуре дата-центров Ростелекома и его партнеров.