Intermediate Data Engineer

Objetivo del empleo: Oportunidad emocionante para un Ingeniero de Datos hábil para convertirse en parte del innovador equipo de MLOps en k0deHut, donde serás fundamental en impulsar nuestras aplicaciones comerciales críticas con tu experiencia en ingeniería de datos. En k0deHut, tendrás la oportunidad de diseñar, implementar y gestionar soluciones de datos integrales en colaboración con un equipo de expertos en diversos dominios tecnológicos.

Responsabilidades Clave:

Desarrollo de Pipelines de Datos:

• Diseñar y mantener pipelines de ETL para procesamiento de datos por lotes y en tiempo real.
• Mejorar la eficiencia y el rendimiento de los pipelines existentes.
• Liderar esfuerzos en visualización de datos e informes.
• Arquitecturar modificaciones de pipelines de datos utilizando herramientas avanzadas para proyectos actuariales e impulsados por IA.

Stack Tecnológico:

• Desarrollar utilizando Python, SQL, Linux y scripting en shell.
• Utilizar Docker para la gestión de contenedores y orquestación.
• El conocimiento de Spark y el entorno Linux será muy ventajoso.

Plataformas y Herramientas:

• Operar dentro de entornos como Azure Data Factory, dbt, Airflow y Databricks.
• Familiaridad con Kafka, Spark Streaming y bases de datos relacionales y NoSQL.
• La experiencia con bases de datos en memoria de alto rendimiento agregará valor.

DevOps y Automatización:

• Integrar Azure DevOps para flujos de trabajo optimizados y colaboración entre departamentos.
• Emplear Terraform para una gestión eficiente de la infraestructura.
• Mantener una documentación rigurosa de procesos y despliegues tecnológicos.

Colaboración:

• Trabajar de cerca con científicos de datos, actuarios, ingenieros de software para satisfacer las necesidades de datos.
• Impulsar la arquitectura de nuestro moderno ecosistema de datos para Machine Learning.

Atributos y Habilidades Personales:

• Fuerte competencia en Python, SQL y Linux.
• Sólido entendimiento de herramientas y plataformas de big data.
• Excelentes habilidades de comunicación con la capacidad de trabajar a través de equipos funcionales.
• Un fuerte enfoque en el aprendizaje y el crecimiento personal.

Educación y Experiencia:

• Grado de Bachillerato o Maestría en Ciencias de la Computación, Ingeniería o similares.
• Al menos 3 años de experiencia en un rol similar.

Esta es una posición híbrida basada en Sandton Jhb, ofreciéndote la flexibilidad de trabajar parcialmente de forma remota. Si te apasiona la ingeniería de datos y buscas causar un impacto significativo en una compañía con visión de futuro, k0deHut es el lugar para ti. ¡Aplica hoy y lleva tu carrera al siguiente nivel!