Data Engineer
Роботодавець · Asura Technologies Ltd.
Розробник програмного забезпечення
Адміністратор баз данихСистемний аналітикГнучкийПовнаБудапешт
Заснована в 2017 році зі штаб-квартирою в Будапешті, Asura Technologies Zrt. шукає Data Engineer до своєї команди. Ми проектуємо, розробляємо та розгортаємо по всьому світу системи паркування, моніторингу дорожнього руху та безпеки на основі штучного інтелекту, інтегруючи в наші рішення власне програмне забезпечення для відеоаналітики та розпізнавання номерних знаків.
Завдання
- Розробка та підтримка конвеєрів даних на Python та AWS, включаючи проектування процесів міграції та трансформації даних.
- Інтеграція даних з різних систем через API та інші канали.
- Керування, адміністрування, оптимізація та підтримка баз даних (PostgreSQL).
- Розробка та моніторинг інфраструктури даних за допомогою інструментів DevOps.
- Розробка та експлуатація сховища даних (Amazon Redshift) та озера даних на базі S3, з оптимізацією витрат і продуктивності.
- Участь у міграції локальних (on-premises) конвеєрів даних в AWS, з паралельною експлуатацією старого та нового середовищ до завершення переходу.
- Проектування та тестування синхронізації даних із джерел (напр., CDC, подіо-орієнтована інтеграція, zero-ETL та завантаження на основі знімків).
- Забезпечення доступності даних майже в реальному часі для моделей прогнозування та API на додачу до щоденних пакетних ETL-процесів.
- Тісна співпраця з командами DevOps, архітектури та вихідних систем у багатоакауنتному середовищі AWS, як на staging, так і на production середовищах.
Умови та пільги
Конкурентна заробітна плата та річний бонусПриватне медичне страхування MedicoverАбонемент All YouCan Move для фітнесу та велnesuДодатковий вихідний у день народженняМожливості професійного розвитку в інноваційній угорській технологічній компаніїПостійний, своєчасний зворотний зв'язок щодо вашої роботи та дружня робоча атмосфераГібридний формат роботи з можливістю працювати з дому 2 дні на тиждень
Вимоги
- Практичний досвід роботи з Python для задач обробки даних.
- Щонайменше 3 роки відповідного професійного досвіду.
- Впевнене знання Linux на практичному рівні.
- Знайомство зі службами AWS (напр., S3, Lambda, RDS, Glue).
- Базові знання SQL та PostgreSQL.
- Досвід роботи з API та інтеграцією даних.
- Базове розуміння принципів DevOps, включаючи CI/CD та Infrastructure as Code (IaC).
- Логічне мислення, готовність до навчання та вміння працювати в команді.
- Розуміння концепцій сховищ даних та основ дименсійного моделювання даних.
- Досвід роботи з Amazon Redshift або подібним колонковим сховищем даних (напр., Snowflake, BigQuery).
- Знайомство з AWS Aurora / RDS PostgreSQL.
- Знання інструментів IaC, таких як Terraform або OpenTofu.