О сервисе^Beta

Для решения задач потоковой обработки больших объемов данных, Big Data-сервисы VK Cloud позволяют создать кластеры Cloud Streams, предоставляющие возможность безопасно и эффективно управлять потоками в режиме реального времени.

Cloud Streams — отказоустойчивая и масштабируемая система потоковой обработки данных, построенная на базе Apache Kafka и Apache NiFi. Основные отличительные особенности Cloud Streams включают в себя:

1. Отказоустойчивость — обеспечение консистентности при потоковой передаче данных в режиме реального времени;
2. Масштабируемость — добавление новых серверов в кластер по мере необходимости;
3. Распределенность — возможность построения гео-распределенной инфраструктуры;
4. Реальное время — управление потоками, добавление и настройка источников данных в режиме реального времени;
5. Безопасность — гибкие механизмы контроля доступа к данным;
6. Интеграция — коннекторы к различным системам: Elasticsearch, SAP HANA, Vertica, Couchbase, Cassandra, CouchDB, IBM MQ и всеми DBaaS которые сейчас есть в облаке.
7. Широкий набор API для интеграции с другими внешними системами;
8. Гибкость — возможность создания workflow с помощью графического интерфейса или разрабатывать свои собственные приложения с помощью SDK для повышения эффективности работы.