Data & AI Engineering
Adattárház-migráció Databricks lakehouse-ra
Kiinduló helyzet
- Több mint 10 éves, on-premise adattárház, növekvő licenc- és üzemeltetési költséggel
- Vezetői és szabályozói riportok, amelyek az átállás alatt sem sérülhettek
- Hosszú napi betöltési idő, hónapokig várakozó adatigények
Megoldás
- Riport- és adatfolyam-függőségek feltérképezése, üzleti területenkénti migrációs ütemterv
- Databricks lakehouse kiépítése, ETL-folyamatok átírása Sparkra
- Párhuzamos futtatás, automatikus eredményegyeztetés minden területen
- Régi adattárház leállítása, platform átadása a bank adatcsapatának