Senior Data Engineer

Ми раді оголосити про вакансію високомотивованого та кваліфікованого Senior Data Engineer для приєднання до нашої команди та допомоги у формуванні довгострокової стратегії управління даними Pharmanovia. Якщо ви захоплюєтеся обробкою даних і маєте бачення створення автономних, самостійних платформ даних та аналітики, ця роль для вас.

Pharmanovia прагне створити найсучаснішу самообслуговуючу платформу даних, яка витягує та узгоджує дані з різних найкращих SaaS платформ (наприклад, SAP S4 HANA, Salesforce CRM, Veeva RIMS) для надання ефективних бізнес-інсайтів управлінським та операційним командам.

Як Senior Data Engineer, ви будете проектувати та впроваджувати масштабовані архітектури даних для підтримки різних джерел та типів даних. Ви будете керувати хмарною інфраструктурою, щоб задовольнити потреби в обробці та зберіганні даних, обираючи відповідні технології баз даних, сховища даних та/або озера даних.

Ви будете розробляти конвеєри для отримання, очищення та інтеграції даних з різних джерел, автоматизувати процеси інтеграції даних та впроваджувати інструменти звітування та візуалізації для дослідження та аналізу даних. Ваша мета - покращити обробку даних та продуктивність запитів.

Ви будете будувати аналітичні можливості для підтримки інструментів самообслуговування даних, звітувати про якість даних, розробляти інфраструктуру даних для застосувань AI/ML та визначати стратегії покращення.

Встановити рамки управління даними, політики та стандарти. Визначити процеси володіння, администрирования та управління якістю даних. Впровадити практики для отримання, зберігання, інтеграції та архівування даних.

Забезпечити відповідність вимогам щодо конфіденційності даних (наприклад, GDPR, CCPA, HIPAA). Проводити аудити та оцінки для зниження ризиків безпеки даних.

Для успішного виконання цієї ролі вам потрібен великий досвід роботи з платформою AWS, інструментами, такими як Databricks, і доказова майстерність у проектуванні та управлінні базами даних та платформами даних. Ви повинні мати досвід в:

• Проектуванні, розробці та впровадженні хмарних рішень на AWS
• Програмувальних мовах, таких як Python, Java або Node.js
• Контейнеризації з Docker, Kubernetes та оркестрації контейнерів на AWS (Amazon EKS)
• Принципах DevOps та CI/CD конвеєрах з використанням AWS Code Pipeline, Jenkins або GitLab CI/CD

• Співпрацювати з міжфункціональними командами для розуміння бізнес-вимог та перекладу їх у масштабовані, безпечні та надійні рішення на AWS
• Підтримувати довгострокову стратегію управління даними для Pharmanovia
• Визначати та впроваджувати ключові інструменти для реалізації стратегії управління даними
• Проектувати та розробляти конвеєри даних за допомогою AWS сервісів, таких як Lambda, EC2, S3, RDS, DynamoDB
• Оптимізувати продуктивність системи, надійність та економічну ефективність шляхом постійного моніторингу та усунення несправностей <