Описание системы CedrusData

CedrusData — это распределённая платформа для анализа данных предприятия, позволяющая выполнять федеративные SQL-запросы к различным источникам данных. Программный продукт CedrusData (рус. СедрусДата) от компании-разработчика Кверифай ЛАБС предназначен для создания единой точки доступа к разнородным источникам данных предприятия с возможностью выполнения федеративных SQL-запросов. Платформа обеспечивает высокопроизводительную обработку данных благодаря массивно-параллельной архитектуре и поддерживает интеграцию с озёрами данных, транзакционными и аналитическими СУБД, NoSQL-продуктами, предоставляя инструменты для мониторинга и развёртывания в облачной среде.

Система CedrusData ориентирована на ИТ-директоров, архитекторов данных, специалистов по обработке данных и аналитиков крупных и средних предприятий, которым требуется инструмент для комплексного анализа разнородных данных из множества источников в единой среде с использованием SQL-запросов.

Система будет востребована в компаниях финансового сектора, телекоммуникаций, электронной коммерции, промышленности и других отраслях, где присутствуют масштабные объёмы данных, требуется высокая производительность обработки и возможность интеграции различных СУБД, NoSQL-систем и озёр данных.

Функциональные возможности CedrusData:

• Запуск федеративных SQL-запросов. Платформа позволяет выполнять федеративные SQL-запросы к разнообразным источникам данных, включая озёра данных на основе HDFS или S3, управляемые Hive Metastore или Apache Iceberg, а также транзакционные и аналитические СУБД (Postgres, MySQL, Greenplum, ClickHouse и др.) и NoSQL-продукты (Apache Cassandra, MongoDB, Redis и др.).

• Массивно-параллельная архитектура. Система использует массивно-параллельную архитектуру, благодаря которой запрос обрабатывается одновременно несколькими независимыми процессами, каждый из которых может задействовать несколько CPU-потоков, что обеспечивает высокую производительность обработки данных.

• Многообразие вариантов вывода данных. CedrusData предоставляет возможность получения данных через интерфейс командной строки или посредством JDBC-драйвера, что позволяет подключать к системе широкий спектр приложений, в том числе популярные BI-утилиты.

• Веб-интерфейс для мониторинга. Платформа оснащена веб-интерфейсом и набором системных таблиц, которые дают возможность эффективно отслеживать состояние кластера и оперативно реагировать на изменения в работе системы.

• Поддержка различных озёр данных. CedrusData работает с озёрами данных, управляемыми с помощью Hive Metastore и Apache Iceberg, что расширяет возможности хранения и обработки неструктурированных и полуструктурированных данных.

• Совместимость с СУБД и NoSQL-системами. Система совместима с широким спектром СУБД (включая Postgres, MySQL, Greenplum, ClickHouse) и NoSQL-продуктов (Apache Cassandra, MongoDB, Redis, Elasticsearch и др.), что обеспечивает гибкость при работе с разнородными данными.

• Инструменты для развёртывания в облаке. Платформа предлагает вспомогательный функционал для развёртывания системы в облачном окружении с использованием технологий Docker, Kubernetes и Helm, что упрощает процесс внедрения и масштабирования решения.