Платформа данных ПГК
DWH + Data Lake + Delta Lake — 8+ продуктов-потребителей, Oracle TCO $19.8M → $0, vendor selection по 6 классам
CTO / Технический директор
2 года · 8 чел
- SAP BW
- Oracle
- Vertica
- Hadoop/Cloudera
- Apache Kafka
- AirFlow
Архитектура платформы данных: источники → Kafka/NiFi/Airflow → LDW → потребители
Развернуть разбор ↓
Что не работает
Данные компании разрознены по 5+ хранилищам: SAP BW, Oracle ИБД, Vertica, Cognos TM1, десятки баз продуктов. Продуктовые команды тратили недели на поиск данных. Oracle DB развёрнуты на нелицензированных гипервизорах — штраф при аудите $19.8M (833 нелицензированных ядра CPU). Отсутствовал единый бизнес-глоссарий и каталог данных.
Архитектурный подход
Корпоративная платформа данных в 4 стадии: DWH → Data Lake → Delta Lake → Data Gateway. Vendor selection по 6 классам инструментов (DWH, ETL, Data Catalog, Business Glossary, MDM, Data Quality). Единый каталог данных с бизнес-глоссарием. MDM/RDM для мастер-данных и НСИ. Миграция с Oracle на лицензионно-чистый стек.
CTO / Технический директор
Инициировал и возглавил миграцию с Oracle. Лично провёл vendor selection по 6 классам инструментов (DWH, ETL, Data Catalog, Business Glossary, MDM, Data Quality). Спроектировал 4-стадийную архитектуру миграции. Выявил лицензионный риск $19.8M (833 нелицензированных ядра CPU) и разработал план устранения.