Vyhledávání

Optimalizace designu ETL

Výchozí situace

  • existuje centrální datový sklad primárně pro účely efektivního plánování, rozhodování, reportování finančních výsledků a konsolidování klíčových informací z bankovních provozních systémů
  • v rámci implementace BASEL II došlo k navýšení denního objemu zpracovávaných dat o 100%
  • doba trvání dávkových ETL procesů překročila definovanou dobu 10 hodin
  • překročení času zpracování inkrementálních dat mělo fatální dopady na fungování bankovních analytických procesů, které jsou implementovány nad datovým skladem a jsou velice důležité pro každodenní fungování závislých organizačních jednotek banky

Cíl projektu

  • celkové zhodnocení technického řešení, analýza příčiny nestandardní délky denního zpracování a audit existujícího řešení Business Intelligence
  • navržení řešení pro odstranění úzkých míst

Výstupy projektu

  • detailní analýza systému a aplikovaných transformačních algoritmů
  • popis nalezených úzkých míst systému a návrhy, jak tato úzká místa odstranit
  • navrženo řešení, které redukuje běh dávkových ETL procesů na cca 70% původní doby, podporuje snadný rozvoj a usnadňuje administraci celého Business Intelligence prostředí
  • řešení vychází z předpokladu růstu denního objemu zpracovávaných dat o dalších 50%