Senior Data Engineer

Data Engineer
Other places
06/17/2024
-

Job expired!

Nous sommes ravis d'annoncer un poste ouvert pour un Ingénieur de Données Senior hautement qualifié et motivé pour rejoindre notre équipe et aider à façonner la stratégie de gestion de données à long terme de Pharmanovia. Si vous êtes passionné par l'ingénierie des données et que vous avez une vision pour créer des plateformes autonomes de données et d'analyses en libre-service, ce poste est fait pour vous.

Pharmanovia vise à construire une plateforme de données de pointe en libre-service qui extrait et aligne les données de diverses plateformes SaaS de premier ordre (par ex., SAP S4 HANA, Salesforce CRM, Veeva RIMS) pour fournir des informations commerciales efficaces aux équipes de gestion et opérationnelles.

En tant qu'Ingénieur de Données Senior, vous concevrez et mettrez en œuvre des architectures de données évolutives pour prendre en charge diverses sources et types de données. Vous gérerez l'infrastructure cloud pour répondre aux besoins de traitement et de stockage des données, en sélectionnant les technologies de bases de données appropriées, les entrepôts de données et/ou les lacs de données.

Vous développerez des pipelines pour ingérer, nettoyer et intégrer des données provenant de sources disparates, automatiserez les processus d'intégration des données et mettrez en œuvre des outils de rapport et de visualisation pour l'exploration et l'analyse des données. Votre objectif est d'améliorer le traitement des données et les performances des requêtes.

Vous construirez des capacités analytiques pour soutenir les outils de données en libre-service, rapporterez sur la qualité des données, développerez une infrastructure de données pour des cas d'utilisation AI/ML et définirez des stratégies d'amélioration.

Établissez des cadres, des politiques et des normes de gouvernance des données. Définissez les processus de possession, de gestion et de qualité des données. Mettez en œuvre des pratiques pour l'acquisition, le stockage, l'intégration et l'archivage des données.

Assurez-vous de respecter les réglementations pertinentes en matière de confidentialité des données (par ex., RGPD, CCPA, HIPAA). Effectuez des audits et des évaluations pour atténuer les risques de sécurité des données.

Pour réussir dans ce rôle, vous avez une vaste expérience avec la plateforme AWS, des outils comme Databricks, et une maîtrise démontrée dans la conception et la gestion de bases de données et de plateformes de données. Vous devez avoir de l'expérience en :

Conception, développement et déploiement de solutions basées sur le cloud sur AWS
Langages de programmation tels que Python, Java ou Node.js
Conteneurisation avec Docker, Kubernetes et orchestration de conteneurs sur AWS (Amazon EKS)
Principes DevOps et pipelines CI/CD utilisant AWS Code Pipeline, Jenkins ou GitLab CI/CD

Collaborer avec des équipes interfonctionnelles pour comprendre les exigences commerciales et les traduire en solutions AWS évolutives, sécurisées et fiables
Soutenir la stratégie de gestion de données à long terme de Pharmanovia
Définir et mettre en œuvre les outils clés pour exécuter la stratégie de gestion des données
Concevoir et développer des pipelines de données en utilisant des services AWS tels que Lambda, EC2, S3, RDS, DynamoDB
Optimiser les performances, la fiabilité et l’efficacité des systèmes grâce à la surveillance continue et au dépannage
Assurer la conformité avec les réglementations de sécurité et de confidentialité des données
Mettre en œuvre les meilleures pratiques d'infrastructure en tant que code (IaC) en utilisant AWS CloudFormation ou Terraform
Rester à jour sur les technologies et tendances émergentes d'AWS
Encadrer les membres juniors de l'équipe, en favorisant une culture d'innovation

Nous recherchons des candidats avec un Baccalauréat ou une Maîtrise en Informatique, Ingénierie ou dans des domaines connexes. Les qualifications supplémentaires comprennent :