Job expired!
Nous cherchons un Ingénieur Senior en données GCP pour rejoindre notre équipe d'ingénieurs ! Nous recherchons une personne confiante, curieuse et directe, qui s'adaptera parfaitement à notre culture favorisant l'autonomie et l'initiative. Votre détermination et votre communication claire rendront nos solutions basées sur le cloud précises et faciles à comprendre. Grâce à votre conviction énergique, vous aiderez notre marque à résoudre les problèmes de manière simple et efficace dans le cloud. Rejoignez-nous si vous êtes enthousiaste à l'idée de faire partie d'une équipe qui valorise la clarté, la confiance et l'efficacité grâce à la technologie du cloud.
Responsabilités :
- Concevoir et développer des structures de données et des pipelines complexes et à grande échelle pour organiser, collecter et standardiser les données afin de générer des informations et répondre aux besoins en matière de rapport
- Écrire des processus ETL complexes (Extract / Transform / Load), concevoir des systèmes de bases de données et développer des outils pour le traitement analytique en temps réel et hors ligne
- Développer des cadres, des normes et du matériel de référence pour l'architecture et les produits associés
- Concevoir des marts de données et des modèles de données pour soutenir la science des données et d'autres clients internes.
- Agir comme mentor pour les membres juniors de l'équipe, en leur fournissant des conseils techniques
- Appliquer la connaissance des outils et des produits gcp-data pour conseiller et orienter d'autres efforts dans de multiples domaines couvrant toute l'entreprise
- Collaborer avec l'équipe de science des données pour transformer les données et intégrer les algorithmes et les modèles dans des systèmes hautement disponibles et en production
- Utiliser une connaissance approfondie de l'architecture Hadoop et des commandes HDFS et de l'expérience dans la conception et l'optimisation des requêtes pour créer des pipelines de données évolutifs, modulaires et efficaces
- Utiliser des compétences avancées de programmation en Python, Java, PySpark, ou dans l'un des principaux langages pour construire des pipelines de données solides et des systèmes dynamiques
- Intégrer les données provenant de diverses sources, en assurant qu'elles respectent les normes de qualité et d'accessibilité des données
- Expérimenter avec les outils disponibles et conseiller sur les nouveaux outils afin de déterminer la meilleure solution étant donné les exigences dictées par le modèle / le cas d'utilisation
Exigences :
- 5+ années d'expérience en ingénierie de données
- 5+ années d'expérience en PySpark (Spark/Scala)
- 3+ années de connaissance avancée en architecture Hadoop, commandes HDFS et expérience dans la conception et l'optimisation des requêtes contre les données dans l'environnement HDFS
- 2+ années d'expérience avec Google Cloud Platform ( GCP )
- Expérience avec les scripts de shell bash, les utilitaires UNIX & les commandes UNIX
- Expérience dans la construction et la mise en œuvre de solutions de transformation et de traitement de données
- Connaissance avancée en Java, Python, Hive, Cassandra, Pig, MySQL ou NoSQL ou similaire
- Si vous êtes passionné par DevOps et GCP, et si vous vous épanouissez dans un environnement collaboratif et en évolution rapide
- Vous aimez résoudre des casse-têtes et comprendre comment les choses fonctionnent, comment elles opèrent, etc.
- Vous vous épanouissez dans un environnement qui vous demande constamment d'apprendre.
