Azure Data Engineer

Задачи

• Участие в разработке и постоянном совершенствовании стратегии платформы данных компании, особенно в отношении интеграции данных, хранения данных, качества данных и доступности данных.
• Предоставление технических рекомендаций о том, как службы данных на базе Azure могут поддерживать бизнес-отчетность, аналитику и оперативное принятие решений.
• Проектирование, мониторинг и поддержка конвейеров данных ETL/ELT с использованием Azure Data Factory.
• Интеграция данных из нескольких внутренних и внешних систем-источников, включая базы данных, API, файлы и бизнес-приложения.
• Разработка и поддержка объектов баз данных, моделей данных, хранимых процедур, представлений и логики преобразования в Azure SQL Database.
• Использование Azure Blob Storage для хранения, организации и обработки структурированных и полуструктурированных данных.
• Внедрение процессов проверки и сверки данных для обеспечения качества, согласованности и надежности данных.
• Исследование и устранение аномалий данных, сбоев конвейеров и проблем с производительностью.
• Создание и ведение технической документации, включая потоки данных, зависимости объектов и происхождение данных (data lineage).
• Поддержка инициатив Power BI и аналитики путем предоставления надежных, хорошо структурированных и готовых к использованию бизнес-слоев данных.
• Тесное сотрудничество с внутренними бизнес-стейкхолдерами и BI-разработчиками для понимания потребностей в данных и их перевода в техническую реализацию.
• Помощь бизнес-пользователям и BI-командам в понимании доступных источников данных, структур данных и логики интеграции.
• Взаимодействие с внешними IT-поставщиками по требованиям к интеграции или запросам на изменение существующих процессов.

Условия и льготы

Требования

• Степень бакалавра или магистра в области компьютерных наук, науки о данных, информационных технологий, инженерии, экономики с сильным фокусом на IT/данные или в смежной области.
• Минимум 3–5 лет опыта работы на позиции Data Engineer, Data Platform Engineer, BI/Data Developer или аналогичной роли.
• Практический опыт работы с процессами ETL/ELT, разработкой баз данных, интеграцией данных и эксплуатацией платформ данных.
• Знакомство с рабочими процессами CI/CD, желательно с Azure DevOps, рутинное использование системы контроля версий (Git) в работе.
• Свободное владение венгерским и профессиональный английский
• Структурированное мышление и способность понимать сложные потоки данных.
• Сильные аналитические навыки и навыки решения проблем.
• Отличное знание языков программирования (SQL обязателен, Python является преимуществом).
• Хорошие коммуникативные навыки.
• Концепции моделирования данных и хранилищ данных.
• Уверенные знания SQL.
• Azure Data Factory, Azure SQL Database, Azure Blob Storage, Azure Logic Apps.
• Основы интеграции REST API.
• Контроль версий на базе Git.