Data Engineer
Роботодавець · AZ9 Group
Адміністратор баз даних
Розробник програмного забезпеченняСистемний аналітикГнучкийПовнаXI район Будапешта, Budapest XI. kerület
Ми шукаємо Senior Data Engineer до команди, яка підтримує цифрову трансформацію міжнародної компанії енергетичного та ритейл-секторів. На вас чекає розробка керованих даними цифрових рішень, інтеграція та обробка великих обсягів даних, а також створення й розвиток сучасного хмарного середовища data engineering.
Завдання
- Розробка масштабованих потоків даних ETL/ELT в середовищі Azure Databricks
- Трансформація та моделювання даних на великих масивах інформації
- Розробка потоків даних реального часу (real-time streaming)
- Інтеграція сервісів Azure та Databricks
- Моніторинг, оптимізація та налаштування продуктивності data pipeline
- Підтримка якості даних, безпеки даних та процесів CI/CD
- Співпраця з командами data science, analytics та бізнес-командами
Умови та пільги
Досвід роботи з MS Synapse, MS Fabric або SnowflakeЗнання Power BI або інших BI-інструментівДосвід роботи з MLflow / Azure MLЗнання доменної сфери ритейлуДосвід роботи з Sparx EAДосвід наставництва або технічного керівництва
Вимоги
- 5+ років досвіду у сфері Data Engineering / DWH Development
- Впевнене знання SQL та баз даних
- Досвід розробки ETL-процесів та моделей даних
- Знання Python та/або PowerShell
- Знання технологій Big Data, Spark або хмарних платформ даних
- Досвід роботи в середовищі Azure / Databricks
- Впевнене володіння англійською мовою