Data Engineer
Работодатель · AZ9 Group
Администратор баз данных
Разработчик программного обеспеченияСистемный аналитикГибкийПолнаяУйбуда, Budapest XI. kerület
Мы ищем Senior Data Engineer в команду, поддерживающую цифровую трансформацию международной компании в энергетическом и ритейл-секторах. Разработка дата-ориентированных цифровых решений, интеграция и обработка больших объемов данных, а также создание и развитие современной облачной среды data engineering.
Задачи
- Разработка масштабируемых потоков данных ETL/ELT в среде Azure Databricks
- Трансформация и моделирование данных на больших объемах информации
- Разработка потоков данных в реальном времени (real-time streaming)
- Интеграция сервисов Azure и Databricks
- Мониторинг, оптимизация и настройка производительности data pipeline
- Поддержка качества данных, информационной безопасности и процессов CI/CD
- Сотрудничество с командами data science, analytics и бизнес-командами
Условия и льготы
Опыт работы с MS Synapse, MS Fabric или SnowflakeЗнание Power BI или других BI-инструментовОпыт работы с MLflow / Azure MLЗнание доменной сферы ритейлаОпыт работы с Sparx EAОпыт наставничества или технического руководства
Требования
- 5+ лет опыта в сфере Data Engineering / DWH Development
- Уверенные знания SQL и баз данных
- Опыт разработки ETL-процессов и моделей данных
- Знание Python и/или PowerShell
- Знание технологий Big Data, Spark или облачных платформ данных
- Опыт работы в среде Azure / Databricks
- Уверенное знание английского языка