Expert Developer – Data Analytics & Data Engineering - REF5086I
Работодатель · Deutsche Telekom IT Solutions
Разработчик программного обеспеченияСистемный аналитик
Администратор баз данныхПолнаяБудапешт
В BDA_CDI HUB мы предоставляем комплексные ИТ-решения для T-Systems в сфере управления данными, аналитики, визуализации и автоматизации процессов. Наша экспертиза охватывает все: от платформ самообслуживания до корпоративных хранилищ данных и аналитических решений. Мы трансформируем нашу традиционную среду хранилищ данных в централизованную архитектуру T-Systems Lakehouse для оптимизации и повышения эффективности.
Задачи
- Проектирование ИТ-платформ, процессов и организационных структур для нашего Lakehouse на базе Azure с использованием Databricks, Data Factory, Data Lake Storage, Event Hub и других передовых технологий.
- Разработка устойчивых архитектур, создание прототипов решений и оценка новых технологий для стимулирования инноваций.
- Поддержка инженерных команд в разработке архитектуры платформы и их наставничество для самостоятельного проектирования решений.
- Обеспечение защиты данных и безопасности при работе с критически важными для бизнеса и персональными данными.
- Совместная работа с командой для улучшения архитектуры платформы, внедрения принципов, шаблонов и лучших практик.
Требования
- Высшее образование в области (бизнес-)информатики, экономики или сопоставимый практический опыт.
- Не менее 5 лет опыта работы в области архитектуры данных.
- Минимум 5 лет практического опыта работы с Databricks и Delta Lake в среде Azure.
- Подтвержденный опыт миграции с традиционных хранилищ данных на современные платформы данных вроде Lakehouse и Delta Lake.
- Глубокий опыт работы с современными платформами данных и архитектурами хранилищ данных.
- Глубокие знания организации и архитектуры хранилищ data lake.
- Четкое понимание реляционных и многомерных систем баз данных.
- Уверенное владение методами моделирования хранилищ данных (Kimball, Inmon, Data Vault).
- Опыт создания конвейеров данных (data pipelines) с использованием Spark Structured Streaming и Delta Lake.
- Сильные навыки программирования на SQL, Python и Spark.