Senior Data Engineer
Munkáltató · DSS Consulting Zrt.
Szoftverfejlesztő
Adatbázis-adminisztrátorRendszerelemzőPest
Tapasztalt Senior Data Engineer szakembert keresünk partnerünk csapatába, aki szívesen dolgozna modern, felhőalapú adatplatformok fejlesztésén és nagyvállalati adatinfrastruktúrák kialakításán. A pozícióban lehetőséged lesz komplex adatfeldolgozási folyamatok tervezésére, fejlesztésére és optimalizálására, elsősorban AWS-alapú Data Lakehouse környezetben.
Feladatok
- Skálázható és megbízható ETL/ELT adatfeldolgozási folyamatok tervezése, fejlesztése és karbantartása AWS szolgáltatások (Glue, Lambda, Step Functions, EMR) használatával.
- Data Lake, Data Warehouse és streaming adatfeldolgozási megoldások kialakítása és üzemeltetésének támogatása (S3, Redshift, Kinesis, Athena).
- Adatfeldolgozási folyamatok optimalizálása teljesítmény, stabilitás és költséghatékonyság szempontjából.
- Adatbiztonsági, hozzáférés-kezelési, titkosítási és megfelelőségi követelmények érvényesítése.
- Adatminőség biztosítása validációs, tesztelési és monitorozási megoldások alkalmazásával.
- Junior Data Engineer kollégák szakmai támogatása és mentorálása.
- Code review-k és technikai egyeztetések vezetése, fejlesztési best practice-ek kialakítása és alkalmazása.
- Modern adatfeldolgozási eszközök, keretrendszerek és automatizációs megoldások bevezetésének támogatása.
- Együttműködés Data Science, BI, Analytics és fejlesztői csapatokkal az üzleti adatigények kiszolgálása érdekében.
- Üzleti intelligencia megoldások támogatása hatékony adatintegrációs és adatelérési lehetőségek biztosításával.
Elvárások
- Legalább 5 év Data Engineering területen szerzett tapasztalat, ebből minimum 3 év AWS-alapú, felhőnatív adatmegoldásokkal.
- Magabiztos, haladó szintű SQL- és Python-ismeret adatfeldolgozási és transzformációs feladatokhoz.
- Gyakorlati tapasztalat az alábbi AWS szolgáltatásokkal: S3, Glue, Lambda, Redshift, Athena, Kinesis, Step Functions, EMR, CloudWatch
- Adatmodellezési megoldások, particionálási technikák és teljesítményoptimalizálási módszerek ismerete.
- Tapasztalat adatfeldolgozási folyamatok ütemezésében és orkestrációs eszközök használatában.
- Adatbiztonsági, Data Governance és adatvédelmi szabályozások ismerete.
- Felsőfokú végzettség vagy releváns, hasonló munkakörben szerzett szakmai tapasztalat.
- Önálló, proaktív munkavégzés és gyors tanulási képesség.
- Strukturált gondolkodás, jó problémamegoldó készség.
- Több párhuzamos feladat hatékony kezelése.
- Kiváló magyar nyelvű kommunikáció szóban és írásban.
- Magabiztos, munkavégzéshez szükséges angol nyelvtudás.
- Együttműködő hozzáállás és nyitottság a szakmai tudásmegosztásra.