Ми шукаємо досвідченого Інженера даних з фокусом на діяльність з Cloud Data Lake. Ідеальний кандидат повинен мати значний досвід у галузі, бажано у сфері фінансових послуг, підтримки корпоративних додатків та роботи з платформами інженерії баз даних, заснованих на хмарних технологіях.
Основні обов'язки та відповідальності
Як Інженер даних, ваші основні обов'язки будуть включати:
- Проектування та розробка Cloud Data Lake від початку до кінця, включаючи приймання даних, моделювання даних та розподіл даних.
- Створення інтеграцій даних між локальними та хмарними системами.
- Проектування та розробка компонентів приймання даних великого обсягу та рішень для збору даних з різних джерел.
- Управління та використання відповідних інструментів у розробці та розгортанні Cloud Data Lake.
- Розробка та впровадження хмарної інфраструктури для підтримки поточних та майбутніх потреб бізнесу.
- Участь у технічному проектуванні, збірці додатків, налаштуванні, тестуванні одиниць та розгортанні у виробництві.
- Забезпечення високої ефективності витрат, продуктивності, безпеки, масштабованості та надійності всіх хмарних рішень.
Необхідні навички
Успішний кандидат матиме:
- Досвід розробки у проектуванні, розробці та розгортанні складних додатків.
- Професіоналізм у Oracle RDBMS та програмуванні на Python, Java та SQL.
- Досвід роботи з міграцією даних до хмари на AWS з використанням Databricks та підтримка баз даних, заснованих на хмарі.
- Досвід створення систем, використовуючи сучасні, масштабовані архітектури, засновані на хмарі.
- Досвід моделювання даних та проектування баз даних із сильними навичками оптимізації продуктивності.
- Досвід налаштування трубопроводів даних для ETL завдань з різними джерелами даних.
- Досвід у вирішенні та вирішенні продуктивності баз даних.
- Глибокі знання хмарної безпеки в AWS/Azure, зокрема IAM Roles & Policies, Security Groups та ключів шифрування.
- Експертиза у оптимізації продуктивності баз даних, масштабованості та забезпеченні безпеки даних і відповідності нормативним вимогам.
- Професійність у системах обробки подій, мікропакетів та системах високошвидкісної та великооб’ємної обробки даних.
- Компетенція у практиках CICD та DevOps.
Освіта та кваліфікації
Ми шукаємо кандидатів з:
- Ступенем бакалавра або магістра в галузі інформатики, комп'ютерної інженерії або відповідній галузі.
Чому варто приєднатися до нас?
Ми віримо у цінність різних досвідів та досвідів. Якщо ви цінуєте інновації, бачите велику картину, приймаєте рішення на основі даних та є командним гравцем, ви можете стати чудовим доповненням до нашої команди.
Про State Street
State Street є одним з найбільших кастодіальних