Banki Partnerünk csapatába keresünk egy tapasztalt Data Engineer kollegát.
Feladatok
- Adatinfrastruktúra fejlesztése és optimalizálása a banki partner adatplatformján
- Adatfeldolgozási folyamatok automatizálása és hatékonyabbá tétele Spark és Python segítségével
- Nagy adatmennyiségek kezelése és valós idejű adatfeldolgozás Apache Kafka használatával
- Adatok integrálása és rendszerek közötti adatáramlás biztosítása Adflow és AWS megoldásokkal
- Kapcsolódás a különböző üzleti és technológiai csapatokkal, hogy az adatvezérelt döntéshozatalt támogassuk
- Meglévő adatfolyamatok és rendszerek karbantartása, optimalizálása és skálázása
Elvárások
- Erős tapasztalat adatfeldolgozási és integrációs technológiákban, különösen Spark, Python és Apache Kafka terén
- AWS felhőalapú környezetben szerzett tapasztalat (pl. S3, Lambda, Glue)
- ETL és adatpipeline fejlesztési ismeretek
- Nagy mennyiségű strukturált és strukturálatlan adat kezelésében szerzett tapasztalat
- SQL ismeretek és adatbázisokkal való munka (NoSQL előny)
- Agilis fejlesztési környezetben szerzett tapasztalat
- Jó kommunikációs és csapatmunkára való képesség
Előnyök
- Banki vagy pénzügyi szektorban szerzett tapasztalat
- Adflow vagy más adatfolyamat-kezelő eszköz ismerete
- CI/CD folyamatokban való jártasság
- Docker, Kubernetes ismerete