Senior Data Engineer
Роботодавець · Zocks
Адміністратор баз даних
Розробник програмного забезпеченняСистемний аналітикПовнаXI район Будапешта, Science Park
Zocks — це платформа зі штучним інтелектом, яка змінює роботу фінансових радників. Уся наша організація з R&D базується в Будапешті, де наші команди безпосередньо формують продукт і технології. Ми шукаємо Senior Data Engineer, який допоможе розвивати та вдосконалювати нашу інфраструктуру даних, забезпечуючи її надійність, масштабованість і продуктивність.
Завдання
- Проєктування, розробка та підтримка продакшн-пайплайнів даних із забезпеченням їх надійності, продуктивності, масштабованості та зручності обслуговування.
- Впровадження нових пайплайнів даних, інтеграцій та можливостей обробки даних для підтримки нашого продукту.
- Участь у проєктуванні та впровадженні нових рішень для озер даних (data lake).
- Оптимізація обробки, зберігання та оркестрації даних для підтримки зростаючих обсягів даних і складних сценаріїв використання.
- Участь в архітектурних обговореннях, оцінка технічних підходів та пропозиції щодо вдосконалення наявних рішень.
- Розробка та вдосконалення автоматизованих перевірок якості даних, моніторингу та системи сповіщень.
- Застосування найкращих інженерних практик для тестування пайплайнів даних, їх спостережуваності, документування та надійності.
- Виявлення, усунення неполадок та вирішення проблем із якістю даних, збоїв у пайплайнах і вузьких місць у продуктивності.
- Покращення узгодженості, повноти та доступності даних у різних системах.
- Повний цикл володіння призначеними рішеннями з інженерії даних — від реалізації до продакшн-експлуатації.