«Самолет» создал гибридную Data-платформу для управления данными

«Для нас это был не просто проект, но и стратегический вызов. Многие компании предпочитают готовые проприетарные решения, но мы сделали выбор в пользу независимости и гибкости, что особенно важно в условиях динамично меняющейся ситуации на рынке. Наш подход позволил создать современную платформу с полным циклом обслуживания данных, которая реализует процессы data governance, в основе имеет инфраструктуру как код и соответствует самым высоким требованиям. Аналитическая платформа обеспечивает кроссистемную интеграцию данных более чем из 170 различных мастер-систем и источников. При этом следует отметить, что в ландшафт решения заложены различные инструменты, позволяющие не только накапливать данные, но и — что намного важнее — создавать стратегию управления данными и эффективно применять их в бизнесе. Например, в нашем ландшафте важную роль играет сервис нормативно-справочной информации, через который тиражируются единые корпоративные справочники», — рассказала директор по данным группы «Самолет» Ольга Свитнева.

Технологический стек платформы включает в себя множество разных компонентов и сервисов — Kubernetes, Kafka, Debezium, MiniO S3, ClickHouse, Airflow, PostgreSQL, DataHub, ML Flow, Jupiter Hub и прочие. Архитектура платформы спроектирована таким образом, чтобы создать максимальную отказоустойчивость и гибкость масштабирования в условиях высокой динамики роста объема данных в компании. Вся платформа развернута и работает на серверной инфраструктуре в собственном дата-центре группы «Самолет».

Заметили неточность или опечатку в тексте? Выделите её мышкой и нажмите: Ctrl + Enter. Спасибо!