Staff Data Engineer
Роботодавець · Zocks
XI район Будапешта, Science Park
Zocks — це ШІ-платформа, що змінює підхід до роботи фінансових консультантів. Ми шукаємо Staff Data Engineer на провідну технічну роль у розвитку нашої інфраструктури даних, забезпечуючи її надійність, масштаبوваність та продуктивність у міру зростання нашого продукту та клієнтської бази.
Завдання
- Ухвалення технічних рішень щодо архітектури даних, проєктування пайплайнів, оркестрації, зберігання та обробки.
- Керування розвитком виробничих пайплайнів даних задля підвищення їхньої надійності, продуктивноści, масштабованості та зручності підтримки.
- Ключова технічна роль у проєктуванні та реалізації нових рішень data lake, включно з вибором архітектури та впровадженням.
- Проєктування та реалізація нових пайплайнів даних, інтеграцій та можливостей обробки даних для підтримки нашого продукту.
- Розробка та вдосконалення автоматизованих перевірок якості даних, систем моніторингу та сповіщення.
- Визначення та просування найкращих інженерних практик для тестування пайплайнів даних, спостережуваності (observability), документування та надійності.
Вимоги
- 7 років практичного досвіду в Data Engineering або суміжних галузях розробки ПЗ, зокрема досвід роботи зі складними виробничими системами даних.
- Експертні навички володіння Python та SQL, а також підтверджений досвід проєктування та створення надійних, масштабованих пайплайнів даних.
- Глибоке розуміння ETL/ELT, моделювання даних, оркестрації пайплайнів та сучасних архітектур даних.
- Впевнений практичний досвід роботи з хмарною інфраструктурою даних, бажано AWS.
- Підтверджений досвід ухвалення архітектурних рішень та керівництва складними технічними ініціативами від проєктування до запуску в продакшн.