DataOps - La redoute Porto
- Other
- Other places
- 06/15/2024
- -
Principales Responsabilités
• Comprendre les problèmes du point de vue de l'utilisateur et communiquer clairement pour comprendre l'issue.
• Reproduire les bugs ou problèmes rencontrés par les utilisateurs.
• Appliquer une analyse des causes racines pour trouver rapidement et efficacement la source du problème, le corriger, le tester et communiquer avec l'utilisateur final.
• Rédiger des post-mortems résumant chaque étape de la résolution et aidant l'équipe à suivre tous les problèmes.
• Surveiller les flux et l'infrastructure existants et effectuer les mêmes tâches lors de la découverte de bugs/problèmes grâce à la surveillance et aux alertes.
• Surveiller les flux et l'infrastructure pour identifier les problèmes potentiels.
• Adapter les configurations pour maintenir les flux et les infrastructures en fonctionnement selon les attentes, assurant ainsi le bon déroulement des opérations sans incidents.
• Suivre les coûts et le temps de traitement grâce à des tableaux de bord dédiés.
• Alerter les personnes qui interroge les tables de manière inefficace, entraînant des coûts élevés.
• Identifier et résoudre les travaux, vues et tables inefficaces, garantissant des coûts et une vitesse d'exécution optimaux.
• Optimiser les travaux, requêtes et tables pour améliorer les coûts et la vitesse d'exécution.
• Gérer l'infrastructure en utilisant Terraform.
• Partager et proposer des meilleures pratiques.
• Désactiver les infrastructures inutiles telles que les services, les tables ou les machines virtuelles.
• Suivre les futurs déploiements avec un Architecte de Données et participer aux Revues de Déploiement.
• Partager et proposer des meilleures pratiques pour les déploiements.
• Soutenir les Ingénieurs de Données tout au long du processus de déploiement et des phases subséquentes de surveillance active.
• Garantir une application diligente des processus de déploiement, des stratégies de journalisation et de surveillance.
• Prendre en charge les nouveaux flux déployés dans le processus de fonctionnement.
Compétences Techniques Requises
• Google Cloud Platform: Connaissance générale de la plateforme et des divers services, avec au moins un an d'expérience avec GCP.
• Apache Airflow: Au moins deux ans d'expérience avec l'orchestrateur Airflow; une expérience avec Google Composer est un plus.
• Google BigQuery: Grande expérience (au moins 4 ans) avec GBQ, y compris l'optimisation des tables et des requêtes ainsi que la conception de l'architecture de base de données.
• Terraform: Au moins deux ans d'expérience avec Terraform et connaissance des meilleures pratiques GitOps.
• Apache Spark: Cette expertise est optionnelle et valorisée; certaines de nos pipelines utilisent pySpark.
• Pub/Sub
• Kafka
• Azure Analysis Services
• Optimisation de Google Cloud Storage
Postulez dès maintenant pour rejoindre Alter Solutions en tant que spécialiste DataOps à La Redoute Porto. Optimisez et gérez notre infrastructure de pointe!