AWS- Data Engineer- AU (Sydney)

Description:

Rackspace recherche un Ingénieur Data expérimenté pour rejoindre notre équipe à Sydney. Le candidat idéal excelle dans la création et la maintenance de frameworks d'ingénierie des données tels que DBT, SQLMesh et Coalesce dans des environnements AWS EMR/Glue. Ce rôle est crucial pour le développement pratique et l'optimisation des pipelines de données, garantissant qu'ils s'alignent avec la stratégie de données de notre banque et sont hautement efficaces.

Responsabilités Clés:

• Expérience avec les services de données AWS, y compris AWS EMR, Glue, S3, Redshift et autres technologies connexes.
• Expérience avérée dans la création de frameworks avancés d'ingénierie des données sur AWS EMR/Glue, Apache Spark et d'autres technologies de services de données AWS.
• Bonne compréhension de l'écriture de code efficace, fiable et maintenable pour gérer les flux de travail des données.
• Excellente base en ingénierie logicielle, y compris la conception orientée objet (OOD) et les modèles de conception.
• Optimiser les pipelines de traitement des données pour la performance et l'évolutivité.
• Collaborer avec des architectes de données pour mettre en œuvre les meilleures pratiques et améliorer les capacités du framework de données.
• Aider à résoudre les défis techniques et apporter un soutien à l'équipe d'ingénierie des données.

Qualifications Minimales:

• Diplôme de baccalauréat en informatique, ingénierie ou un domaine technique connexe.
• 3+ années d'expérience pratique avec les services AWS, en particulier EMR et Glue.
• Maîtrise de la création de frameworks d'ingénierie des données comme DBT, SQLMesh ou Coalesce.
• Bonne compréhension de SQL, de la modélisation des données et des processus ETL.

Qualifications Préférées:

• Expérience avec les systèmes de contrôle de version et les pipelines CI/CD.
• Familiarité avec des services AWS supplémentaires et des outils d'analyse de données.

Informations Supplémentaires:

Nom de la compagnie: Rackspace

Titre de l'emploi: Ingénieur Data AWS - AU

Lieu: Sydney