ETL operations specialist (PySpark)
„Přijměte výzvu, staňte se součástí našeho datového týmu a pojďte s námi pracovat na datové transformaci MPSV!“
Challenge
Stavíme nový datový sklad v Azure, který integruje data z celé sociální oblasti. Naše projekty jsou vedeny inovacemi a zaměřeny na efektivní využití dat v rámci resortu.
Co bude náplní Vaší práce
- Spolupráce s vývojářem ETL při nasazování nových ETL transformací – zodpovědnost za nasazení nových ETL do produkce, provádění testů ETL
- Monitoring a správa běhů ETL
- Identifikace a řešení problémů v ETL
- Optimalizace výkonu ETL
- Podílení se na standardech Continuous Integration a Continuous Deployment (CI/CD)
- Podílení se monitorování a logování: řešení pro monitorování provozu platformy, sběru logů a analýzu výkonu
- Identifikace a řešení problémů a chyb, sledování dostupnosti a výkonu služeb
- Správa metadat spojených s ETL procesy
Kvalifikace a požadavky
- Minimálně 2 roky praxe v provozu ETL
- Dobrá znalost PySpark
- Znalost Scala výhodou
Nabízíme
- Práci na projektech s reálným dopadem na život občanů ČR
- Přístup k moderním a inovativním nástrojům
- Silnou podporu vedení pro digitalizaci státu
- Podporu v osobním rozvoji formou školení
- Flexibilní pracovní dobu
- Dlouhodobou spolupráci