Staff Data Engineer
Работодатель · Zocks
Уйбуда, Science Park
Zocks — это ИИ-платформа, меняющая подход к работе финансовых консультантов. Мы ищем Staff Data Engineer, который займет ключевую техническую роль в развитии нашей инфраструктуры данных, обеспечивая ее надежность, масштабируемость и производительность по мере роста нашего продукта и клиентской базы.
Задачи
- Принятие технических решений в отношении архитектуры данных, проектирования пайплайнов, оркестрации, хранения и обработки.
- Управление развитием производственных пайплайнов данных с целью повышения их надежности, производительности, масштабируемости и удобства поддержки.
- Ключевая техническая роль в проектировании и реализации новых решений data lake, включая выбор архитектуры и внедрение.
- Проектирование и реализация новых пайплайнов данных, интеграций и возможностей обработки данных для поддержки нашего продукта.
- Разработка и совершенствование автоматизированных проверок качества данных, систем мониторинга и оповещения.
- Определение и продвижение лучших инженерных практик для тестирования пайплайнов данных, наблюдаемости (observability), документирования и надежности.
Требования
- 7 лет практического опыта в Data Engineering или смежных областях разработки ПО, включая опыт работы со сложными производственными системами данных.
- Экспертные навыки владения Python и SQL, а также подтвержденный опыт проектирования и создания надежных, масштабируемых пайплайнов данных.
- Глубокое понимание процессов ETL/ELT, моделирования данных, оркестрации пайплайнов и современных архитектур данных.
- Уверенный практический опыт работы с облачной инфраструктурой данных, желательно AWS.
- Подтвержденный опыт принятия архитектурных решений и руководства сложными техническими инициативами от проектирования до запуска в продакшн.