Senior/Principal Backend Data Engineer - Data Platform

У Dematic ми на порозі революції нашого ландшафту даних, створюючи сучасну платформу Enterprise Data Lakehouse. Ми формуємо дві ключові команди платформи, щоб керувати створенням основних компонентів цієї новаторської платформи. Ці команди будуть виходити за межі традиційного поглинання даних, проектуючи платформу з мікросервісною архітектурою, що надає абстракції, дозволяючи іншим командам безперешкодно розширювати платформу.

Ми шукаємо динамічних та висококваліфікованих Data Engineers старшого та основного рівня, щоб спроектувати та побудувати основну основу нашої платформи Enterprise Data. Ця роль вимагає інженерів, які не тільки мають глибоке розуміння ландшафту інженерії даних, але й раніше будували основні фундаменти. Ідеальні кандидати зроблять значний вклад у розвиток платформи, активно формуючи майбутнє нашої екосистеми даних.

Можливість допомоги з переїздом до Ватерлоо

Що ми пропонуємо:

• Конкурентна зарплата та пільги
• Допомога з переїздом
• Можливості для професійного зростання

Обов’язки:

• Проектування, розробка основних компонентів платформи даних з мікросервісною архітектурою, абстрагуючи складності платформи та інфраструктури.
• Створення та підтримка основних SDK і бібліотек платформи даних згідно з галузевими найкращими практиками.
• Проектування та розробка фреймворків з’єднувачів і сучасних конекторів для отримання даних з різнорідних додатків як у локальному середовищі, так і в хмарі.
• Проектування та оптимізація сховища даних, обробки і продуктивності запитів для великих наборів даних за допомогою галузевих найкращих практик.
• Проектування та розробка фреймворків забезпечення якості даних та процесів, щоб забезпечити точність та надійність даних.
• Співпраця з науковцями з даних, аналітиками та міжфункціональними командами для проектування моделей даних, схем баз даних та рішень для зберігання даних.
• Проектування та розробка можливостей для передової аналітики та машинного навчання на платформі даних.
• Проектування та розробка фреймворків для спостереження та управління даними.
• Солідний досвід у циклах розгортання та випуску даних, що забезпечує надійну та масштабовану платформу.
• Відстежування останніх трендів, технологій та найкращих практик у галузі інженерії даних.

Вимоги:

• 10+ років (для старших фахівців), 15+ років (для основних фахівців) підтвердженого досвіду в сучасній інженерії даних у хмарному середовищі, архітектурах даних, сховищах даних та програмній інженерії.
• Експертні знання з архітектури, проектування та побудови наскрізних платформ даних у середовищі GCP з дотриманням найкращих практик, таких як відкриті стандарти, вартість, продуктивність, час на ринок та мінімізація залежності від постачальників.
• Солідний досвід побудови платформ даних у середовищі GCP.
• Солідний досвід проектування та розробки модульних, розпод