Staff Data Engineer
Munkáltató · Zocks
Szoftverfejlesztő
Adatbázis-adminisztrátorRendszerelemzőRugalmasTeljesBudapest XI. kerület, XI., Science Park
A Zocks egy AI-platform, amely átalakítja a pénzügyi tanácsadók munkáját. Olyan Staff Data Engineer kollégát keresünk, aki vezető technikai szerepet vállal adatainfrastruktúránk fejlesztésében, biztosítva a megbízhatóságot, skálázhatóságot és teljesítményt termékünk és ügyfélkörünk folyamatos növekedése mellett.
Feladatok
- Az adatarchitektúrával, pipeline-tervezéssel, orkesztrációval, tárolással és feldolgozással kapcsolatos technikai döntések meghozatala.
- A production adatkezelési pipeline-ok fejlesztésének felügyelete, megbízhatóságuk, teljesítményük, skálázhatóságuk és karbantarthatóságuk javítása.
- Kulcsfontosságú technikai szerep vállalása új data lake megoldások tervezésében és megvalósításában, beleértve az architekturális döntéseket és a bevezetést.
- Új adatkezelési pipeline-ok, integrációk és adatfeldolgozási képességek tervezése és megvalósítása a termék támogatása érdekében.
- Automatizált adatminőségi ellenőrzések, monitoring és riasztási funkciók fejlesztése és továbbfejlesztése.
- Az adatfeldolgozási pipeline-ok tesztelésével, observability-jével, dokumentációjával és megbízhatóságával kapcsolatos mérnöki best practice-ek meghatározása és képviselete.
- A teljesítménybeli szűk keresztmetszetek, adatinvektor-inkonzisztenciák és architekturális korlátok proaktív azonosítása és kezelése.
- Együttműködés a Head of Data-val a technikai prioritások és az adatmérnöki képességeink hosszú távú fejlődésének alakításában.
- Szoros együttműködés Data Analitikusokkal az adatigények megértése, valamint a megbízható és elérhető adatok biztosítása érdekében az elemzésekhez és riportokhoz.
- Együttműködés a Platform Engineeringgel és a DevOpsszal a felhőinfrastruktúra, a deployment, a monitoring és az operatív megbízhatóság terén.
Elvárások
- 7 év gyakorlati tapasztalat az adatmérnöki (Data Engineering) területen vagy szorosan kapcsolódó szoftverfejlesztési szakterületeken, beleértve összetett production adatrendszerek tulajdonlását.
- Magas szintű Python és SQL ismeretek, erős referenciákkal megbízható és skálázható adatfeldolgozási pipeline-ok tervezésében és építésében.
- Mélységes megértése az ETL/ELT, adatmodellezés, pipeline orkesztráció és modern adatarchitektúrák területeinek.
- Erős gyakorlati tapasztalat felhőalapú adatainfrastruktúrával, lehetőleg AWS-sel kapcsolatban.
- Bizonyított tapasztalat architekturális döntések meghozatalában és összetett technikai kezdeményezések vezetésében a tervezéstől a production környezetig.
- Alapos ismeretek az adattárházak (data warehousing), adattárolás és elosztott adatfeldolgozás terén