Expert Developer – Data Analytics & Data Engineering - REF5086I
Munkáltató · Deutsche Telekom IT Solutions
SzoftverfejlesztőRendszerelemző
Adatbázis-adminisztrátorTeljesBudapest
A BDA_CDI HUB-nál átfogó IT-megoldásokat biztosítunk a T-Systems számára az adatelemzés, a vizualizáció és a folyamatautomatizálás területén. Szakértelmünk az önkiszolgáló elemzési platformoktól egészen a vállalati szintű adatraktár- és elemzési megoldásokig terjed. Hagyományos adatraktár-környezetünket centralizált T-Systems Lakehouse architektúrává fejlesztjük az optimalizálás és a hatékonyság növelése érdekében.
Feladatok
- IT platformok, folyamatok és szervezeti struktúrák tervezése az Azure-alapú Lakehouse-unk számára a Databricks, Data Factory, Data Lake Storage, Event Hub és más élvonalbeli technológiák felhasználásával.
- Fenntartható architektúrák fejlesztése, prototípus-megoldások készítése és új technológiák értékelése az innováció ösztönzése érdekében.
- A mérnöki csapatok támogatása a platformarchitektúra fejlesztésében, és mentorálásuk az önálló megoldástervezés felé.
- Az adatvédelem és a biztonság biztosítása az üzletkritikus és személyes adatok kezelése során.
- Együttműködés a csapattal a platformarchitektúra fejlesztése, valamint az alapelvek, minták és a legjobb gyakorlatok (best practices) kialakítása érdekében.
Elvárások
- Felsőfokú végzettség (üzleti) informatikus, közgazdász vagy ezzel egyenértékű gyakorlati tapasztalat.
- Legalább 5 év tapasztalat az adatmérnöki architektúra (data engineering) területén.
- Minimum 5 év gyakorlati tapasztalat a Databricks és Delta Lake használatában az Azure szolgáltatások keretében.
- Bizonyított tapasztalat a hagyományos adatraktár-megoldásokról a modern adatplatformokra – mint például a Lakehouse és a Delta Lake – történő migrációban.
- Erős tapasztalat a modern adatplatformok és adatraktár-architektúrák terén.
- Mélyreható ismeretek a data lake tárhelyek szervezéséről és architektúrájáról.
- Alapos megértés a relációs és multidimenzionális adatbázis-rendszerek terén.
- Magas szintű jártasság az adatraktár-modellezési módszerekben (Kimball, Inmon, Data Vault).
- Tapasztalat adatfolyamatok (data pipelines) építésében a Spark Structured Streaming és Delta Lake felhasználásával.
- Erős programozási készségek SQL, Python és Spark nyelveken.