DataOps -

Oportunidad de empleo para DataOps Engineer en Alter Solutions

Descripción del trabajo

Responsabilidades principales

Respuesta a incidentes:

• Entender y abordar eficazmente los problemas de los usuarios.
• Reproducir y diagnosticar errores o problemas que enfrentan los usuarios.
• Realizar análisis de causa raíz para resolver rápidamente los problemas.
• Identificar, corregir, probar y comunicar la resolución a los usuarios finales.
• Documentar los pasos de resolución y ayudar al equipo a rastrear todos los problemas con postmortems.
• Monitorear los flujos e infraestructuras actuales, abordando errores/problemas a medida que surgen mediante monitoreo y alertas.

Mantenimiento:

• Monitorear constantemente los flujos y la infraestructura para detectar posibles problemas.
• Actualizar configuraciones para mantener operaciones fluidas.

Optimización de bases de datos:

• Usar paneles de control para rastrear costos y tiempos de procesamiento.
• Alertar a los usuarios sobre métodos de consulta ineficientes que aumentan los costos.
• Identificar y optimizar trabajos, vistas y tablas para mejorar el rendimiento y la eficiencia de costos.

Gestión de infraestructura:

• Gestionar la infraestructura utilizando Terraform.
• Proponer y compartir las mejores prácticas de la industria.
• Desmantelar infraestructuras innecesarias, como servicios redundantes, tablas o máquinas virtuales.

Despliegues:

• Coordinar futuros despliegues con Data Architects y participar en las revisiones de despliegue.
• Promover y compartir las mejores prácticas de despliegue.
• Apoyar a los Data Engineers durante todo el proceso de despliegue y el período de monitoreo activo subsiguiente.
• Asegurar una estricta adherencia a los protocolos de despliegue, estrategias de registro y monitoreo.
• Integrar los flujos recién desplegados en el proceso continuo.

Habilidades técnicas requeridas

• Google Cloud Platform: Comprensión integral con al menos un año de experiencia.
• Apache Airflow: Mínimo de dos años de experiencia, conocimientos de Google Composer son ventajosos.
• Google BigQuery: Experiencia profunda de al menos 4 años, incluyendo optimización de tablas y consultas y diseño de arquitectura de bases de datos.
• Terraform: Dos años de experiencia y familiaridad con las mejores prácticas de GitOps.
• Apache Spark: La experiencia es opcional pero valorada, algunos flujos utilizan pySpark.

Conocimientos y experiencia adicionales (preferido, pero no requerido)

• Pub/Sub
• Kafka
• Azure Analysis Services
• Optimización de Google Cloud Storage

Información de la empresa

Nombre de la empresa: Alter Solutions

Título del trabajo: DataOps Engineer