Cloud Data Engineer

Задачи

• Интеграция источников данных и разработка процессов загрузки данных на новой платформе Data Lakehouse компании, чтобы бизнес-подразделения получали актуальные и надежные данные.
• Разработка и оптимизация масштабируемых процессов обработки данных и трансформации данных, что способствует эффективной и быстрой обработке данных в команде.
• Создание и внедрение моделей данных для поддержки бизнес- и аналитических потребностей, чтобы организация могла работать с удобными и структурированными данными.
• Разработка решений для обеспечения качества данных, валидации и мониторинга для стабильной работы платформы.
• Сотрудничество с экспертами по данным и бизнес-экспертами, разработчиками отчетов, коллегами-дата-саентистами и внешними партнерами.
• Поддержка процессов разработки, тестирования и запуска на протяжении всего жизненного цикла разработки.
• Создание технической и разработческой документации, а также описаний по эксплуатации.
• Поддержка стабильной работы служб платформы данных, анализ и устранение неисправностей.
• Активное участие в дальнейшем развитии архитектуры платформы данных и операционной модели.
• Поддержка внедрения лучших практик (best practices), возможностей автоматизации и новых технологий.