Data Quality Developer
Работодатель · ALDI International IT Services (Hungary)
Администратор баз данных
Разработчик программного обеспеченияТестировщик программного обеспеченияПолнаяПеч
ALDI International IT Services (Венгрия) ищет программиста по качеству данных для внедрения проверок качества данных, создания мониторов и сотрудничества с инженерами данных и аналитическими командами в Пече.
Задачи
- Внедрение проверок качества данных в нескольких доменах данных, включая основные данные, транзакционные данные, данные в пути, сверку и аналитические/отчетные данные
- Создание и поддержка мониторов таблиц для обнаружения задержек/сбоев конвейеров и проблем со здоровьем данных по каждой таблице/представлению, включая: свежесть, ожидания по объему и изменения схемы
- Создание и поддержка мониторов метрик для выявления аномалий в ключевых статистических/бизнес- KPI и выполнения сравнений/сверок между системами с проверкой согласованных допусков
- Создание и поддержка мониторов валидации для выявления ошибочных отдельных строк и обеспечения соблюдения бизнес-логики
- Создание и поддержка мониторов производительности запросов для обнаружения неэффективных/проблемных запросов, увеличивающих затраты на вычисления или создающих риск тайм-аутов и последующих инцидентов с качеством данных
- Интеграция мониторинга качества данных в жизненный цикл конвейера данных / продукта данных
- Сотрудничество с инженерами данных и аналитическими командами для расследования инцидентов качества данных, проведения анализа первопричин и внедрения превентивных исправлений
- Документирование реализованных проверок/мониторов, включая их назначение, ответственных лиц и инструкции по интерпретации оповещений
Условия и льготы
Постоянно растущая организация и расширяющиеся возможностиНадежная долгосрочная работаРазнообразные и увлекательные обязанностиДостойная заработная платаГибкие условия трудаВозможность удаленной работы (home office)
Требования
- Хорошие знания управления данными, качества данных и архитектуры данных
- Практический опыт внедрения правил/проверок качества данных и эксплуатации решений для мониторинга качества структурированных данных
- Прочные навыки работы с SQL и Python
- Понимание измерений качества данных (полнота, корректность/точность, согласованность, уникальность, валидность, своевременность) и того, как преобразовывать их в измеримые проверки
- Знакомство с мониторингом данных в пути и шаблонами сверки между системами
- Сильные навыки сотрудничества и коммуникации для работы со множеством заинтересованных сторон (инжиниринг данных, продукт данных, аналитика/отчетность)
- Опыт работы в средах инжиниринга данных (преимущество): озеро/хранилище данных (data lake/warehouse), оркестрация конвейеров и CI/CD для изменений данных/конвейеров
- Опыт работы с инструментами/платформами качества данных (преимущество), например Syniti или Monte Carlo
- Опыт работы с SAP и/или интеграционной архитектурой (преимущество)
- Хорошее владение английским языком (уровень upper-intermediate или выше)
- Способность работать в гибкой (agile) среде