L'ingénieur de données senior conçoit, construit et optimise les pipelines de données pour les principales capacités de données et d'analyse de l'entreprise. Ce poste travaille en collaboration avec le personnel de l'entrepôt de données et d'analyse, les administrateurs de bases de données et les experts en la matière pour créer des processus fiables qui chargent les données ciblées avec intégrité et qualité, permettant leur utilisation stratégique par l'entreprise.
Collaborez au sein d'une équipe multidisciplinaire agile pour fournir des solutions optimales d'intégration et de transformation des données
Analysez les exigences en matière de données (fonctionnelles et non fonctionnelles) pour développer et concevoir des solutions robustes et évolutives de pipelines de données automatisées et résistantes aux pannes pour les initiatives commerciales et technologiques
Profilez les données pour évaluer l'exactitude et l'exhaustivité des sources de données et fournir des commentaires lors des sessions de collecte de données
Concevez, construisez, maintenez et opérationnalisez des pipelines de données pour des données de grand volume et complexes en utilisant les outils et pratiques appropriés dans les environnements de développement, de test et de production. Concevez avec modularité pour tirer parti de la réutilisation du code autant que possible
Développez et concevez des mappages de données, des programmes, des routines et des SQL pour acquérir des données provenant d'environnements hérités, web, cloud et de packages achetés dans l'environnement analytique
Comprenez et appliquez l'utilisation appropriée de ELT, ETL, la virtualisation des données et d'autres méthodes pour optimiser l'équilibre entre un mouvement minimal des données et la performance, et encadrez d'autres sur leur utilisation appropriée
Piloter l'automatisation de la préparation des pipelines de données et des tâches d'intégration pour minimiser les processus manuels et sujets aux erreurs et améliorer la productivité en utilisant des outils et des techniques modernes de préparation des données, d'intégration et de gestion des métadonnées activées par l'IA
Tirer parti des installations d'audit qui permettront de surveiller la qualité des données pour détecter des problèmes émergents. Déployez des règles de transformation pour nettoyer en fonction des règles et des normes définies
Participez à l'architecture, à la gouvernance et aux revues de conception, en identifiant les opportunités et en faisant des recommandations
Participez aux évaluations de santé de l'environnement existant et aux évaluations des technologies émergentes
Collaborez avec les architectes pour concevoir et modéliser les structures de données des applications, le stockage et l'intégration conformément aux normes d'architecture à l'échelle de l'entreprise dans les environnements hérités, web, cloud et de packages achetés
Spécifications du poste
A généralement les compétences ou aptitudes suivantes :
Licence en informatique, science des données, statistiques, économie ou domaine fonctionnel connexe ; ou expérience équivalente
Excellentes compétences en communication écrite et verbale avec la capacité de recueillir des exigences et de communiquer efficacement des concepts et des idées techniques à tous les niveaux des employés et de la direction
6+ années d'expérience de travail dans une équipe de développement fournissant des capacités analytiques
6+ années d'expérience pratique dans le domaine des données couvrant la préparation des données, SQL, les outils d'intégration, la conception des pipelines de données ETL/ELT
Expérience en codage SQL
Expérience de travail dans un environnement de développement agile (Scrum, Kanban) avec un accent sur l'intégration et la livraison continues
Connaissance des diverses architectures, modèles et capacités de données tels que l'architecture orientée événements, les flux de données en temps réel, les référentiels non relationnels, la virtualisation des données, le stockage dans le cloud, etc.
Connaissance et expérience de plusieurs plateformes d'intégration de données (IBM InfoSphere DataStage, Oracle Data Integrator, Informatica PowerCenter, MS SSIS, AWS Glue, Denodo), et plateformes MPP pour entrepôts de données comme Snowflake, Netezza, Teradata, Redshift, etc.
Familiarité avec les pratiques de DataOps et leur application dans les environnements analytiques ainsi que leur capacité à étendre les capacités de données et d'analyse à d'autres systèmes opérationnels et consommateurs
Familiarité avec le magasin d'événements et le traitement en flux (Apache Kafka et des plateformes comme Confluent) et avec les plateformes de développement et de gestion d'API (MuleSoft, Axway) est bénéfique
Capacité à se concentrer sur un ensemble spécifique de tâches tout en garantissant l'alignement sur une conception stratégique plus large
Compétences préférées
Expérience en Azure, Azure Pipelines, Azure Devops
Excellente compréhension de la programmation T-SQL
Pensée critique et compétences en résolution de problèmes et analyse des problèmes de données
Connaissance des tests et des tests unitaires
Connaissance des systèmes/industries médicaux, d'assurance et optiques
#LI-REMOTE
#LI-VISIONCARE
La fourchette de rémunération pour ce poste est indiquée ci-dessous. Les fourchettes de salaire applicables peuvent varier d'un marché à l'autre. Le salaire réel sera déterminé en fonction de l'expérience et d'autres facteurs liés à l'emploi autorisés par la loi. Dans le cadre de la rémunération, ce poste peut inclure des primes et des commissions éligibles. Pour plus d'informations sur les avantages de VSP Vision, veuillez cliquer ici.
Fourchettes de salaire : 80 000,00 $ - 135 000,00 $
VSP Vision est un employeur qui offre l'égalité des chances et qui prend en compte les candidatures de candidats qualifiés sans distinction d'âge, de sexe, de race, de couleur, de religion, de sexe, d'origine nationale, d'identité de genre, d'orientation sexuelle, de handicap ou de statut de vétéran protégé. Nous maintenons un environnement de travail sans drogues et effectuons des tests de dépistage de substances avant l'embauche.