Senior Data Engineer

Feladatok

• A Data & Analytics platform optimális architektúrájának meghatározása, amely biztosítja az összes szükséges adat elérhetőségét és újrafelhasználhatóságát az elemzési termékek létrehozásához
• Adatfolyamok kezelése és felügyelete az adatok betöltéséhez és átalakításához a Data & Analytics platform(ok)ba
• Új adatforrások (belső és külső) integrálása és átalakítása teljes körű adatfolyam (pipeline) létrehozásával az adatbeviteltől az ETL folyamatig
• Adatszolgáltatás biztosítása operatív alkalmazások számára, amelyek több forrásból származó adatok átalakítását igénylik
• A Data & Analytics platform adatfolyamainak és adatmodelljeinek optimalizálása és bővítése, támogatva az elemzési termékek bevezetését
• Részletes Data Engineering folyamatok meghatározása és dokumentálása a Data & Analytics platform hatékony építésének és támogatásának garantálása érdekében
• A megvalósított ELT folyamatok és adatfolyamok stabilitásának, megbízhatóságának és hatékonyságának értékelése, szükség esetén újratervezése
• Igények felmérése és technikai specifikációs dokumentum készítése
• Magas adatminőségi szabványok biztosítása és felügyelete, különös tekintettel az adatok konzisztenciájára
• Az adatinterfészekkel és az ELT folyamatokkal kapcsolatos incidensek időbeni elhárítása
• A jelenlegi Data & Analytics platform bővítése „big data” képességekkel a legjobb gyakorlatok feltárása és megosztása révén

Feltételek és juttatások

Elvárások

• Mesterfokozat informatikai vagy közgazdasági területen
• 5-6 éves data engineer tapasztalat
• Folyékony angol nyelvtudás
• Tapasztalat adatmodellezésben (konceptuális, logikai, fizikai) és az adatmodellezés dokumentálásában
• Szakmai tapasztalat és elméleti ismeretek fizikai és logikai adatmodellek – beleértve az adatfolyamokat (data streaming) – felépítéséről és karbantartásáról
• Képesség a technológiai követelményeken túlmutató gondolkodásra EGY egységes logikai Data & Analytics platform felépítése érdekében
• Kiváló ismeretek és igazolt szakmai tapasztalat MS Azure és Lakehouse architektúra terén, mélyreható ismeretek és/vagy tanúsítvány Databricks (Spark) rendszerben
• Jól strukturált, analitikus gondolkodásmód, valamint képesség a folyamatok világos és érthető elmagyarázésére a nem technikai közönség számára is
• Rendszerkezelési szakértelem monitoringgal, katasztrófavédelemmel, biztonsági mentéssel, automatizált teszteléssel, automatizált séma-migrációval és folyamatos deploymenttel kapcsolatban
• Képesség a felelősségvállalásra és bizonyított törekvés a kiválóságra