Senior Data Engineer
Munkáltató · Zocks
Szoftverfejlesztő
Adatbázis-adminisztrátorRendszerelemzőTeljesBudapest XI. kerület, Science Park
Tapasztalt Senior Data Engineer kollégát keresünk az adatforgatási infrastruktúránk fejlesztésére és bővítésére. Olyan szakembert várunk, aki biztosítja a megbízhatóságot, skálázhatóságot és a nagyszerű teljesítményt, miközben a termékünk és az ügyfélkörünk folyamatosan növekszik. Csatlakozz az Adatcsapatunkhoz, ahol összetett mérnöki kihívások és izgalmas új projektek várnak rád.
Feladatok
- Production adatfolyamatok (data pipelines) tervezése, fejlesztése és karbantartása, garantálva a megbízhatóságot, a teljesítményt, a skálázhatóságot és a karbantarthatóságot.
- Új adatfolyamatok, integrációk és adatfeldolgozási képességek implementálása a termékünk támogatása érdekében.
- Hozzájárulás az új adat-tó (data lake) megoldások tervezéséhez és implementálásához.
- Az adatfeldolgozás, adattárolás és orkesztráció optimalizálása a növekvő adatmennyiség és az összetett használati esetek támogatására.
- Részvétel az architekturális megbeszélésekben, technikai megközelítések értékelése és fejlesztési javaslatok tétele a meglévő megoldásokra.
- Automatizált adatminőség-ellenőrzések, monitorozási és riasztási funkciók fejlesztése és tökéletesítése.
- Mérnöki best practices alkalmazása az adatfolyamatok tesztelésére, átláthatóságára (observability), dokumentálására és megbízhatóságára vonatkozóan.
- Adatminőségi problémák, pipeline hibák és teljesítménybeli szűk keresztmetszetek azonosítása, hibaelhárítása és elhárítása.
- Az adatok konzisztenciájának, teljességének és elérhetőségének javítása a rendszerek között.
- A rábízott adatmérnöki megoldások teljes körű (end-to-end) tulajdonlása a megvalósítástól a production üzemeltetésig.
Elvárások
- 5 év gyakorlati tapasztalat adatmérnöki (Data Engineering) területen vagy szorosan rokon szoftverfejlesztési diszciplínákban, beleértve a production adarendszerekkel szerzett tapasztalatot is.
- Kiváló Python és SQL ismeretek, valamint tapasztalat megbízható adatfolyamatok (data pipelines) tervezésében, fejlesztésében és karbantartásában.
- Stabil ETL/ELT, adatmodellezési, pipeline orkesztrációs és modern adatinfrastruktúra-ismeretek.
- Gyakorlati tapasztalat felhőalapú adatinfrastruktúrával, előnyben részesítve az AWS-t.
- Tapasztalat adattárházak (data warehousing), adattárolási és adatfeldolgozási technológiák terén.
- Tapasztalat az adatminőség, monitorozás, tesztelés, hibaelhárítás és teljesítmény-optimalizálás területén.
- Képesség önálló technológiai megoldások tervezésére és implementálására, a kompromisszumok felmérésére és összetett mérnöki problémák megoldására.
- Tapasztalat az Adat-, Infrastruktúra- és Szoftverfejlesztő csapatokkal való együttműködésben.
- Erős problémamegoldó készség és proaktív szemlélet