Senior Data Engineer, Customer & Data
Работодатель · Bluprintx
Будапешт
Компания BPX нанимает Senior Data Engineer в связи с развитием специализированного направления по работе с данными параллельно с нашей практикой Intelligent Marketing. Вы будете разрабатывать и сопровождать конвейеры, модели и дата-продукты для корпоративных front-office программ, превращая сырые данные о клиентах, продуктах и взаимодействиях в чистые, надежные и готовые к активации данные. Snowflake является основной платформой в наших текущих крупнейших проектах, интегрированной с Twilio Segment, Braze и Amplitude, а также вы будете работать с Databricks, BigQuery, Azure и AWS в зависимости от потребностей клиентов.
Задачи
- Разработка и поддержка конвейеров загрузки из исходных систем, потоков событий и сторонних платформ в облачную платформу данных.
- Разработка и тестирование логики трансформации и моделей данных для превращения сырых данных в чистые, документированные и пригодные для повторного использования наборы данных о клиентах и событиях.
- Подготовка готовых к активации данных для CDP и платформ вовлечения, включая таблицы аудитории, признаки и шаблоны синхронизации warehouse-native или zero-copy.
- Совместная работа с архитекторами данных над внедрением целевых проектов, заблаговременное выявление практических проблем для обеспечения жизнеспособности решения в продакшене.
- Настройка проверок качества данных, мониторинга и оповещений, а также оперативная диагностика и устранение проблем с конвейерами и данными по мере их возникновения.
- Повторное тестирование и обновление downstream-потоков при изменении исходных систем или архитектуры платформы для бесперебойной работы CDP, платформ вовлечения и отчетности.
- Применение стандартов безопасности, контроля доступа и конфиденциальности при каждой разработке, включая GDPR и работу с данными согласия.
- Использование контроля версий, CI/CD и код-ревью в качестве стандарта, а также документирование конвейеров для поддержки клиентскими командами.
- Вклад в развитие компетенций BPX по работе с данными через повторно используемые конвейеры, шаблоны и инженерные стандарты, а также помощь в оценке объемов и трудозатрат.
- requirements_list_name_fix_placeholder_unused
- От 5 лет опыта в инженерии данных, включая создание продакшн-конвейеров на облачной платформе данных.
- Уверенный практический опыт работы со Snowflake. Наличие сертификата SnowPro Core или выше будет преимуществом.
- Знание как минимум одной другой платформы, такой как Databricks, BigQuery, Azure или AWS.
- Экспертные знания SQL и уверенный Python, а также сильные навыки моделирования данных.
- Опыт работы с современными инструментами для работы с данными, такими как dbt, Fivetran, Airflow или аналогами, а также практиками Git и CI/CD.
- Опыт работы с клиентскими, маркетинговыми или событийными данными, в идеале — с наполнением CDP вроде Twilio Segment или платформ вовлечения вроде Braze.
- Практическое понимание конфиденциальности данных, безопасности и GDPR. Опыт работы в финансовых услугах или других регулируемых отраслях будет преимуществом.
- Консультационный опыт или опыт работы в агентстве, либо способность работать напрямую с клиентами и объяснять технические задачи простыми словами.
- Свободное владение английским языком и право на работу в стране EMEA, где представлен BPX.