Vývojář ETL (PySpark)
„Přijměte výzvu, staňte se součástí našeho datového týmu a pojďte s námi pracovat na datové transformaci MPSV!“
Challenge
Stavíme nový datový sklad v Azure, který integruje data z celé sociální oblasti. Naše projekty jsou vedeny inovacemi a zaměřeny na efektivní využití dat v rámci resortu.
Co bude náplní Vaší práce
- Příprava detailního technického designu řešení ELT transformací a jeho implementace
- Tvorba, provoz a rozvoj programového kódu těchto transformací pomocí PySpark/Scala
- Úzká spolupráce s business datovým analytikem, od kterého budete přebírat vstupy pro vývoj ETL
- Spolupráce s ETL operations specialistou při nasazování nových ETL transformací
- Podílení se na standardech Continuous Integration a Continuous Deployment (CI/CD)
- Ladění dodaného řešení/kódu s ohledem na požadované funkční požadavky (latence, through-put, dostupnost atd.)
Kvalifikace a požadavky
- Minimálně 2 roky praxe v oboru vývoje ETL
- Dobrá znalost PySpark
- Znalost Scala výhodou
Nabízíme
- Práci na projektech s reálným dopadem na život občanů ČR
- Přístup k moderním a inovativním nástrojům
- Silnou podporu vedení pro digitalizaci státu
- Podporu v osobním rozvoji formou školení
- Flexibilní pracovní dobu
- Dlouhodobou spolupráci