Senior Data Engineer
Работодатель · Zocks
Администратор баз данных
Разработчик программного обеспеченияСистемный аналитикПолнаяУйбуда, Science Park
Zocks — это ИИ-платформа, которая меняет работу финансовых советников. Вся наша научно-исследовательская организация базируется в Будапеште, где наши команды напрямую формируют продукт и технологии. Мы ищем Senior Data Engineer, который поможет развивать и совершенствовать нашу инфраструктуру данных, обеспечивая ее надежность, масштабируемость и производительность.
Задачи
- Проектирование, разработка и поддержка продакшн-пайплайнов данных с обеспечением надежности, производительности, масштабируемости и простоты поддержки.
- Внедрение новых пайплайнов данных, интеграций и возможностей обработки данных для поддержки нашего продукта.
- Участие в проектировании и внедрении новых решений для озер данных (data lake).
- Оптимизация обработки, хранения и оркестрации данных для поддержки растущих объемов информации и сложных сценариев использования.
- Участие в архитектурных обсуждениях, оценка технических подходов и предложения по улучшению существующих решений.
- Разработка и совершенствование автоматизированных проверок качества данных, мониторинга и системы оповещений.
- Применение лучших инженерных практик для тестирования пайплайнов данных, их наблюдаемости, документирования и надежности.
- Выявление, поиск и устранение неполадок с качеством данных, сбоев в пайплайнах и узких мест в производительности.
- Повышение согласованности, полноты и доступности данных в различных системах.
- Полный цикл владения назначенными решениями по инженерии данных — от реализации до продакшн-эксплуатации.