Data Infrastructure Engineer (Java & Rust)
Роботодавець · MWDN
Розробник програмного забезпечення
Адміністратор баз данихГнучкийПовнаБудапешт
Ми шукаємо Data Infrastructure Engineer для створення та підтримки високопродуктивної інфраструктури data lakehouse. Ви розроблятимете надійні робочі процеси обслуговування даних для Apache Iceberg, зокрема стиснення, закінчення терміну дії знімків (snapshot expiry), перезапис manifest-файлів та очищення сирітських файлів, із сильним фокусом на цілісність та коректність даних.
Завдання
- Проєктування та розгортання сервісів, які перетворюють сигнали про стан таблиць на безпечні та коректні операції з обслуговування
- Забезпечення того, щоб кожен коміт у таблицю клієнта був гарантовано коректним, зокрема за умов паралельного запису, повторних спроб та часткових збоїв
- Робота над продукційним рушієм стиснення даних (compaction) та супутніми системами
- Підтримка QueryFlux: сортування запитів, перегляд pull request, створення нових конекторів рушія та релізи
- Експлуатація створених вами систем у production, включно з чергуваннями (on-call) та дебагом у реальних середовищах клієнтів
Умови та пільги
Людиноцентричний менеджментЛюдиноцентричний менеджмент із мінімальною бюрократієюКорпоративна культураДружня корпоративна культура, яку підтверджують співробітники, що вирішують повернутисяГнучкий графікГнучкий графік роботиВідпустка29 днів оплачуваної відпустки (18 робочих днів на рік плюс усі державні свята)Дні на відновлення10 оплачуваних днів на відновленняЮридична підтримкаПовна фінансова та юридична підтримка для підрядників (ФОП)Уроки англійськоїБезплатні заняття з англійської мови з носіями або викладачами з УкраїниПідтримка HRВиділена підтримка HR
Вимоги
- 5 років досвіду розробки програмного забезпечення на Java
- Міцний досвід розробки на Rust
- Досвід роботи з TypeScript
- Продукційний досвід роботи з інфраструктурою даних та підтримкою продакшн-систем
- Практичні знання Apache Iceberg та Parquet
- Ґрунтовний досвід роботи з PostgreSQL
- Досвід роботи з Kubernetes
- Розуміння операцій з обслуговування даних та цілісності даних
- Здатність працювати самостійно та брати на себе відповідальність за технічні рішення
- Сильні комунікативні та командні навички, зокрема проведення code review та внесок в open-source проєкти