DataOps - La redoute Porto
- Other
- Other places
- 06/15/2024
- -
Responsabilidades Principales
• Comprender los problemas desde la perspectiva del usuario y comunicarse claramente para entender el problema.
• Reproducir errores o problemas que enfrentan los usuarios.
• Aplicar análisis de causa raíz para encontrar rápida y eficientemente la causa del problema, solucionarlo, probarlo y comunicarse con el usuario final.
• Redactar postmortems resumiendo cada paso de la resolución y ayudar al equipo a rastrear todos los problemas.
• Monitorear los flujos e infraestructura existentes y realizar las mismas tareas al descubrir errores/problemas a través del monitoreo y alertas.
• Monitorear flujos e infraestructura para identificar posibles problemas.
• Adaptar configuraciones para mantener los flujos e infraestructuras funcionando según lo esperado, manteniendo las operaciones sin problemas y sin incidentes.
• Rastrear costos y tiempo de procesamiento a través de tableros dedicados.
• Alertar a las personas que consultan tablas de manera ineficiente, causando altos costos.
• Identificar y resolver trabajos, vistas y tablas ineficientes, asegurando costos óptimos y velocidad de ejecución.
• Optimizar trabajos, consultas y tablas para mejorar tanto los costos como la velocidad de ejecución.
• Gestionar infraestructuras usando Terraform.
• Compartir y proponer mejores prácticas.
• Desmantelar infraestructuras innecesarias como servicios, tablas o máquinas virtuales.
• Rastrear futuros despliegues con un Arquitecto de Datos y participar en Revisiones de Despliegue.
• Compartir y proponer mejores prácticas para el despliegue.
• Apoyar a los Ingenieros de Datos durante todo el proceso de despliegue y fases de monitoreo activo subsecuentes.
• Asegurar la aplicación diligente de los procesos de despliegue, estrategias de registro y monitoreo.
• Asumir los nuevos flujos desplegados en el proceso en ejecución.
Habilidades Técnicas Requeridas
• Google Cloud Platform: Conocimiento general de la plataforma y varios servicios, con al menos un año de experiencia con GCP.
• Apache Airflow: Al menos dos años de experiencia con el orquestador Airflow; experiencia con Google Composer es una ventaja.
• Google BigQuery: Experiencia extensa (al menos 4 años) con GBQ, incluida la optimización de tablas y consultas y el diseño de la arquitectura de bases de datos.
• Terraform: Al menos dos años de experiencia con Terraform y conocimiento de las mejores prácticas de GitOps.
• Apache Spark: Esta es una experiencia opcional que valoramos; algunas de nuestras tuberías usan pySpark.
• Pub/Sub
• Kafka
• Azure Analysis Services
• Optimización de Google Cloud Storage
¡Aplica ahora para unirte a Alter Solutions como especialista en DataOps en La Redoute Porto. Optimiza y gestiona nuestra infraestructura de vanguardia!