Expert Developer – Data Analytics & Data Engineering - REF5086I
Роботодавець · Deutsche Telekom IT Solutions
Розробник програмного забезпеченняСистемний аналітик
Адміністратор баз данихПовнаБудапешт
У BDA_CDI HUB ми надаємо комплексні ІТ-рішення для T-Systems у сферах управління даними, аналітики, візуалізації та автоматизації процесів. Наша експертиза охоплює все: від платформ самообслуговування до корпоративних сховищ даних та аналітичних рішень. Ми перетворюємо наше традиційне середовище сховищ даних на централізовану архітектуру T-Systems Lakehouse для оптимізації та підвищення ефективності.
Завдання
- Проєктування ІТ-платформ, процесів та організаційних структур для нашого Lakehouse на базі Azure з використанням Databricks, Data Factory, Data Lake Storage, Event Hub та інших передових технологій.
- Розробка стійких архітектур, створення прототипів рішень та оцінка нових технологій для стимулювання інновацій.
- Підтримка інженерних команд у розробці архітектури платформи та їхнє менторство для самостійного проєктування рішень.
- Забезпечення захисту даних та безпеки під час обробки критично важливих для бізнесу та персональних даних.
- Співпраця з командою задля вдосконалення архітектури платформи, встановлення принципів, шаблонів та найкращих практик.
Вимоги
- Диплом у галузі (бізнес-)інформатики, економіки чи еквівалентний практичний досвід.
- Щонайменше 5 років досвіду в архітектурі інженерії даних.
- Мінімум 5 років практичного досвіду роботи з Databricks та Delta Lake у сервісах Azure.
- Підтверджений досвід міграції від традиційних сховищ даних до сучасних платформ даних на кшталт Lakehouse та Delta Lake.
- Ґрунтовний досвід роботи з сучасними платформами даних та архітектурами сховищ даних.
- Глибокі знання щодо організації та архітектури сховищ data lake.
- Чітке розуміння реляційних і багатовимірних систем баз даних.
- Впевнене володіння методами моделювання сховищ даних (Kimball, Inmon, Data Vault).
- Досвід побудови конвеєрів даних (data pipelines) з використанням Spark Structured Streaming та Delta Lake.
- Сильні навички програмування на SQL, Python та Spark.