Data Pipeline Tester
- Other
- Other places
- 06/30/2024
- -
Únase al Grupo Adani como Probador de Pipelines de Datos y aproveche su experiencia en pipelines de datos, procesos ETL y validación de datos para optimizar nuestras operaciones de ingeniería de datos. Este rol es fundamental para garantizar la precisión, calidad y rendimiento de nuestra infraestructura de datos.
1. Colaborar con equipos de ingeniería de datos para definir e implementar estrategias de prueba para pipelines de datos, incluyendo pruebas unitarias, pruebas de integración y pruebas de extremo a extremo.
2. Desarrollar casos de prueba y scripts de prueba para verificar la funcionalidad del pipeline de datos, la precisión de los datos y el rendimiento según los requisitos definidos.
3. Realizar validaciones de datos para asegurarse de que los datos se transformen y se carguen correctamente en los sistemas de destino cumpliendo con los estándares de calidad de datos.
4. Realizar pruebas de regresión para identificar y prevenir problemas derivados de cambios o actualizaciones en los pipelines de datos.
5. Evaluar el rendimiento de los pipelines de datos, identificando cuellos de botella y áreas para optimización, y proporcionando recomendaciones para la mejora.
6. Probar procesos de manejo y recuperación de errores para asegurar la robustez de los pipelines de datos ante problemas inesperados.
7. Documentar planes de prueba, casos de prueba y resultados de prueba, manteniendo registros claros y organizados de las actividades de prueba.
8. Colaborar con ingenieros de datos, científicos de datos y partes interesadas comerciales para comprender los requisitos de datos y asegurar que las pruebas de pipeline de datos se alineen con los objetivos comerciales.
9. Reportar y rastrear defectos y problemas, trabajando con equipos de desarrollo para resolverlos eficientemente.
10. Desarrollar y mantener scripts de prueba automatizados para agilizar los procesos de prueba y mejorar la eficiencia.
1. Experiencia probada como probador de pipelines de datos, analista de calidad de datos o un rol similar.
2. Conocimiento profundo de pipelines de datos, procesos ETL y transformación de datos.
3. Competencia en lenguajes de consulta y scripting como SQL, Python o similares.
4. Familiaridad con herramientas de validación de datos y marcos de pruebas.
5. Experiencia con herramientas de visualización de datos (por ejemplo, Tableau, Power BI) es una ventaja.
6. Experiencia con sistemas de control de versiones (por ejemplo, Git) y prácticas de DevOps.
7. Orientado a resultados con fuertes habilidades analíticas, de pensamiento crítico y numéricas.
8. Un jugador de equipo capaz de trabajar e integrarse en equipos multifuncionales para la implementación de proyectos.
9. Capacidad para trabajar de manera efectiva e independiente en un entorno ágil y acelerado con plazos ajustados.
10. Un jugador de equipo flexible, pragmático y colaborativo con una capacidad innata para involucrarse con las partes interesadas en todos los niveles de la organización.
11. La atención al detalle es crucial para la limpieza de datos y asegurar la precisión de los datos.
12. Capacidad para resolver problemas comerciales del mundo real utilizando enfoques basados en datos.
13. Conocimiento de la ética de datos y regulaciones de privacidad (por ejemplo, DPDP, Ley de TI de 2000) al manejar datos sensibles.
Licenciatura o Maestría en Ciencias de la Computación, Ciencia de Datos, Gestión de la Información, Estadísticas o un campo relacionado.
Aprox. entre 3 a 5 años de experiencia en un rol de pruebas de datos o similar dentro de dominios industriales.
La experiencia en Metales, Minería y Comercio de Materias Primas es una ventaja definitiva.
Nombre de la Empresa: Grupo Adani
Título del Trabajo: Probador de Pipelines de Datos
Aplica ahora para ser parte del Grupo Adani, donde tus habilidades y experiencia en pruebas de pipelines de datos impulsarán el éxito y la innovación. Mejorar la calidad de los datos y la eficiencia operacional está en el corazón de lo que hacemos.