Senior Databricks Data Engineer
Munkáltató · Hiflylabs
Budapest
A Hiflylabs Senior Databricks Data Engineer pozícióba keres munkatársat budapesti csapatába. Olyan szakembert keresünk, aki a főbb felhőkörnyezetekben felelős a Databricks platformon alapuló komplex, skálázható Lakehouse megoldások tervezéséért, fejlesztéséért és implementálásáért.
Feladatok
- Komplex, skálázható Lakehouse megoldások tervezése, fejlesztése és implementálása a Databricks platformon.
- Moduláris adatfolyamok tervezése, építése és optimalizálása a Delta Lake használatával.
- Adatkezelési elvek és biztonságos adatelérési rétegek megvalósítása a Databricks Unity Catalog alkalmazásával.
- Tiszta, hatékony és karbantartható SQL- és Python-kód írása Databricks Notebookokban és IDE-kben.
- Automatizálási szkriptek fejlesztése a Databricks CLI és REST API-k felhasználásával.
- CI/CD folyamatok kialakítása, fenntartása és optimalizálása.
- Adatfolyamok automatizálása és orkesztrációja a Databricks Workflows vagy Spark Declarative Pipelines segítségével.
- Olyan megoldások szállítása, amelyek a Databricks ökoszisztémára épülnek, és zökkenőmentesen integrálódnak a felhőalapú tárhely- és biztonsági szolgáltatásokkal.
- Modern adatmodellezési és adattárház-megoldások tervezése és implementálása Databricks SQL Warehouse-ok használatával.
- A szállítással kapcsolatos technikai feladatok kézben tartása és menedzselése.
- Részvétel a projekttervezésben, feladatbecslésben, tesztelésben, valamint az üzleti érintettekkel való kapcsolattartásban.
- Átfogó műszaki dokumentáció készítése.
Feltételek és juttatások
Változatos projektekMinden megbízásban van valami új, technikai vagy üzleti oldalon, ami segít a fejlődésben.Önállóság és bizalomA bizalom kultúránk alapköve. Fogjuk a kezed, ha szükséged van rá, de teret adunk, ha feszegetnéd a határaidat.Rugalmas munkavégzésSzeretjük a Bartók Béla úti irodánkat, amely nemcsak munkahely, hanem közösségi tér is. Tiszteletben tartjuk azonban, hogy ki mikor és hol tud a legjobban dolgozni.EgyensúlySzeretjük, amit csinálunk, és olyanokkal szeretnünk együtt dolgozni, akik szintén örömmel végzik a munkájukat. Felejtsd el az értelmetlen megbeszéléseket és a felesleges adminisztrációt.Mentori támogatás az első naptólA folyamatos támogatás nálunk nem csak üres szó; egy mentor kíséri végig a karrierutadat.Tanulási és fejlődési lehetőségekHa szeretnél folyamatosan tanulni és fejlődni, remek lehetőségeket biztosítunk a potenciálod kibontakoztatásához.Támogató vállalati kultúraKözösségi összetartás, amely a bajtársiaságra, a kölcsönös támogatásra és a tiszteletre épül.
Elvárások
- Magas szintű SQL- és Python-ismeret, különös tekintettel a tiszta, hatékony és karbantartható kódra.
- Gyakorlati tapasztalat mesterséges intelligencián alapuló kódolási eszközök és ágensek használatában.
- Tapasztalat API-integráció terén és szkriptelésben a platform automatizálásához.
- Gyakorlati tapasztalat a Declarative Automation Bundles (DABs) használatában.
- Stabil ismeretek a standard CI/CD eszközökről és a verziókövetésről.
- 3-5 év gyakorlati tapasztalat adatmérnöki területen, erős fókusszal a Databricks Lakehouse architektúrára.
- Igazolt tapasztalat legalább egy komplex, skálázható adatszolgáltatási megoldás leszállításában a Databricks alapfunkcióinak felhasználásával.
- Erős tapasztalat a Databricks üzemeltetésében legalább egy nagyobb felhőkörnyezetben (AWS, Azure vagy GCP).
- Anyanyelvi szintű magyar, valamint kiváló írásbeli és szóbeli angol nyelvtudás.