Sr Big Data Engineer Airflow and Oozie (GCP)

Job expired!

À propos du rôle :

Nous recherchons un Ingénieur Big Data Senior hautement qualifié et expérimenté pour rejoindre notre équipe dynamique chez Rackspace Technology. Le candidat idéal aura une solide expérience dans le développement de systèmes de traitement par lots, une vaste expérience avec Oozie, Airflow et l'écosystème Apache Hadoop, ainsi qu'une solide compréhension des technologies du cloud public, spécialement la Google Cloud Platform (GCP). Ce rôle permet une flexibilité avec les configurations de travail à distance, nécessitant d'excellentes compétences en communication et la capacité de résoudre des problèmes complexes de manière indépendante et créative.

  • Développer un code scalable et robuste pour les systèmes de traitement par lots, en utilisant des technologies telles que Hadoop, Oozie, Pig, Hive, Map Reduce, Spark (Java), Python, Hbase.
  • Gérer et optimiser les workflows de données en utilisant Oozie et Airflow au sein de l'écosystème Apache Hadoop.
  • Exploiter GCP pour des solutions de traitement et de stockage de big data scalables.
  • Implémenter l'automatisation et les meilleures pratiques DevOps pour CI/CD, IaC, et plus encore.
  • Expérience avérée avec les services managés de GCP et compréhension des systèmes de traitement par lots basés sur le cloud.
  • Forte maîtrise de Oozie, Airflow, Map Reduce, Java.
  • Excellentes compétences en programmation avec Java (spécifiquement Spark), Python, Pig, et SQL.
  • Expertise en services cloud publics, particulièrement en GCP.
  • Expérience en Infrastructure et principes DevOps appliqués, utilisant des outils comme Terraform pour CI/CD et IaC.
  • Capacité à aborder des défis complexes et à concevoir des solutions efficaces de manière indépendante.
  • Compétences en communication efficaces pour les configurations de travail à distance.
  • Certification Google Associate Cloud Engineer ou autre certification professionnelle Google Cloud de niveau supérieur.
  • Plus de 10 ans d'expérience dans le logiciel/la technologie face au client ou le conseil.
  • Plus de 5 ans d'expérience dans les migrations "du local au cloud" ou les transformations informatiques.
  • Plus de 5 ans d'expérience dans la construction et la gestion de solutions sur GCP (idéalement) ou AWS/Azure.
  • Diplôme technique en informatique, ingénierie logicielle, ou un domaine connexe.

Nous sommes les experts en solutions multicloud, combinant notre expertise avec les technologies leader mondiales — à travers les applications, les données et la sécurité — pour livrer des solutions complètes. Nous sommes continuellement reconnus comme l'un des meilleurs lieux de travail selon Fortune, Forbes et Glassdoor. Rejoignez-nous dans notre mission d'embrasser la technologie, d'autonomiser les clients et de livrer l'avenir.

Chez Rackspace, nous prospérons grâce à notre connexion à un objectif central : être des membres appréciés d'une équipe gagnante dans une mission inspirante. Nous apportons notre entièreté au travail chaque jour, et nous croyons que des perspectives uniques alimentent l'innovation et nous permettent de mieux servir nos clients et communautés à travers le globe.

Nous nous engageons à offrir une opportunité d'emploi égale sans tenir compte de l'âge, de la couleur, du handicap, du changement de genre ou de l'identité ou expression de genre, des informations génét