Data engineer
Через агенцію · Randstad Hungary
Розробник програмного забезпечення
Адміністратор баз данихСистемний аналітикПовнаБудапешт
Роль Data Engineer зосереджена на створенні комплексних рішень з обробки даних: проєктуванні, впровадженні та оптимізації сховищ, завантаженні й маніпуляції даними, створенні продуктів даних та їх підтримці. Ви будете підтримувати критично важливий бізнес-продукт з аналітики даних, який використовується по всій Європі для моделювання планів виробництва автомобілів з метою максимізації прибутковості за умови суворого дотримання екологічних норм ЄС та місцевих нормативів щодо викидів CO2.
Завдання
- Проєктування та розбудова продакшн-рішень з data engineering і павзлайнів за допомогою сервісів Google Cloud Platform (GCP).
- Міграція наявних Big Data пайплайнів у середовище Google Cloud Platform.
- Участь у роботі команди впровадження на всіх етапах — від концепції до запуску.
- Впровадження автоматизації на всіх етапах пайплайну для скорочення часу розробки та релізу.
- Визначення, розробка, оцінка та підсумовування результатів Proof of Concepts (PoCs) для валідації архітектурних рішень.
- Тестування, бенчмаркінг і порівняння альтернативних рішень із чітрим обґрунтуванням оптимального технічного вектора.
- Удосконалення процесів управління інцидентами, деплою та аналізу першопричин.
- Пряма співпраця з Product Owners, бізнес-стейкхолдерами та архітекторами для проєктування, розробки, тестування й деплою змін.
- Виявлення та впровадження сучасних інструментів і практик розробки для підвищення гнучкості та швидкості доставки.
- Керівництво великомасштабним впровадженням та операційною підтримкою сховищ даних, озер даних і аналітичних платформ на GCP.