Data Engineer

Duchoslav Pavel, e-mail: pavel.duchoslav@deutsche-boerse.com Vaše odpovědnosti: - Navrhování, vytváření a optimalizace datových kanálů pro usnadnění extrakce dat z více zdrojů - Poskytování podpory první úrovně pro požadavky koncových uživatelů při řešení problémů s datovými kanály - Vyvíjení ETL/ELT (dávkový/streamový) systém z více zdrojů pomocí Sparku a/nebo Kafky - Provozování datových kanálů pro zajištění správy klíčových SLA napříč širokou škálou producentů a spotřebitelů - Podpora různých komponent datových kanálů, včetně příjmu, validace, čištění a kurace - Podpora spolupráce v oblasti dat, orchestrace, kvality, zabezpečení, přístupu a snadného použití - Shromažďování datových požadavků od analytických a obchodních oddělení - Psaní a správa provozní a technické dokumentace a provádění úkolů v agilní metodologii Váš profil: - Praktické zkušenosti s cloudovými nativními technologiemi, Azure/GCP - Přímé zkušenosti s budováním datových kanálů, jako je Data Factory - Porozumění široké škále technologií pro big data a datové architektury - Znalost datových platforem a technologií, jako jsou Kafka, Delta Lake, Spark; Databricks výhodou - Prokázaná zkušenost s jedním nebo více programovacími jazyky, nejlépe Pythonem - Dobrá znalost CI/CD a nástrojů pro správu verzí, jako jsou Jenkins a GitHub Actions - Zkušenosti s monitorovacími nástroji, jako jsou Prometheus, Grafana, ELK stack, výhodou - Schopnost začlenit do role inženýrské i provozní (DevOps) myšlení - Silný týmový hráč ochotný spolupracovat s kolegy napříč kancelářemi a funkcemi - Znalost psané i mluvené angličtiny