Старший інженер з даних

CloudFactory шукає висококваліфікованого та досвідченого старшого інженера з даними, який приєднається до нашої динамічної команди. Як світовий лідер у поєднанні людей і технологій для надання рішень щодо облачних робочих сил, CloudFactory реалізує численні проєкти з машинного навчання та обробки базових бізнес-даних. Ми зосереджені на створенні економічних і лідерських можливостей для талановитих осіб у розвинених країнах. Як старший інженер з даними в CloudFactory, ви граєте важливу роль у розвитку та підтримці нашої інфраструктури даних для підтримки наших зростаючих операцій. Ви отримаєте шанс працювати з передовими технологіями та разом з різноманітною і заповзятлюваною командою розширювати наші можливості обробки даних. Якщо ви зацікавлені робити внесок в світ через впливову роботу, знаходимо задоволення в будівництві відносин, і успішно працюєте як частина злагодженої команди, то CloudFactory для вас. Обов'язки: Успішний кандидат перетворить вимоги користувачів на дієві прозорі дії, використовуючи існуючі інструменти та технології. Ваші обов'язки включатимуть: -Регулярний контакт з менеджерами проектів/зацікавленими сторонами для розуміння їх потреб. -Дослідження, щоб перевірити, чи можуть потреби бути задоволені за допомогою існуючої технології та ресурсів даних. -Видобуток даних за допомогою Python та інших інструментів, таких як Fivetran. -Моделювання даних за допомогою SQL та концепції зірки та схеми сніговика. -Допомога в оптимізації вартості та продуктивності в межах сховища даних. -Пояснення причин і логіки за поглядами, щоб допомогти приймати оптимальні рішення. -Написання систем якості даних та інших систем збору метаданих в межах каналів передачі даних для підвищення спостережності та відновлюваності каналів. -Написання модульних та інтеграційних тестів для підвищення надійності системи. -Наставництво та керівництво. Технологічний стек: Наш технологічний стек включає: -Інструменти для витягування даних та оркестрації - Fivetran, Prefect -Інструмент моделювання даних - DBT -Дом складування даних - Сніговик -Перевірка якості даних - DBT, Elementary -Візуалізація даних - Tableau та Quicksight -Каталог даних та походження - Atlan -Управління вихідним кодом - Github -Інфраструктура як код - Terraform -Мова програмування - Python -Сервіси AWS (ECS, S3) Процес співбесіди: Кандидатам буде запропоновано пройти початковий тест на кодування та аналітичне мислення, а потім співбесіду зі старшим менеджером продуктів, де вони обговорять попередні проекти, включаючи використані підходи та досягнуті результати. Успішні кандидати зустрінуться з директором інженерії перед остаточною співбесідою з CTO. Очікується, що процес займе 1-2 тижні. Вимоги: Ідеальний кандидат повинен мати: -Мінімум 4 роки досвіду як інженер даних. -Експертизу в SQL в контексті будівництва та управління корпоративним сховищем даних. -Експертизу в оркестрації даних та пов'язаних з ними інструментах в контексті транспортування даних. -Компетентність з OLAP-системами та пов'язаними з ними випадками використання. -Компетентність у витягуванні даних з джерельних систем за допомогою Python. -Глибокі знання та уміння використовувати архітектуру MPP. -Компетентність у моделюванні даних за допомогою Kimball, Inmon або Data Vault. -Компетентність у написанні модульних тестів та інтеграційних тестів. -Розуміння мікросервісів і подієвих систем. -Відмінні комунікативні навички, здатність перетворювати складні дані в зрозумілі огляди та розповіді.