Rejoignez Rackspace en tant que ingénieur de données AWS à Melbourne, où vous jouerez un rôle essentiel dans la construction et la maintenance de frameworks d'ingénierie de données tels que DBT, SQLMesh et Coalesce dans des environnements AWS EMR/Glue. Vos efforts seront déterminants pour développer et optimiser les pipelines de données afin de s'aligner sur la stratégie de données de notre banque.
- Utiliser les services de données AWS, y compris AWS EMR, Glue, S3 et Redshift.
- Construire des frameworks avancés d'ingénierie de données sur AWS EMR/Glue et Apache Spark.
- Développer des flux de données efficaces, fiables et maintenables.
- Appliquer les principes d'ingénierie logicielle, y compris la conception orientée objet (OOD) et les modèles de conception.
- Optimiser les pipelines de traitement de données pour la performance et l'évolutivité.
- Collaborer avec les architectes de données pour mettre en œuvre les meilleures pratiques et améliorer les capacités des frameworks de données.
- Résoudre les défis techniques et soutenir l'équipe d'ingénierie des données.
- Diplôme de licence en informatique, ingénierie ou domaine technique connexe.
- 3+ ans d'expérience pratique avec les services AWS, en particulier EMR et Glue.
- Maîtrise de la construction de frameworks d'ingénierie de données comme DBT, SQLMesh ou Coalesce.
- Compréhension solide de SQL, de la modélisation des données et des processus ETL.
- Expérience avec les systèmes de contrôle de version et les pipelines CI/CD.
- Familiarité avec des services AWS supplémentaires et des outils d'analyse de données.
Entreprise : Rackspace
Intitulé du poste : Ingénieur de données AWS - Spécialiste des frameworks
Lieu : Melbourne, Australie