Sr. Data Engineer

Únete a Cargill como Ingeniero Sr. de Datos y Haz un Impacto Global

En Cargill, nuestro tamaño y escala nos proporcionan la capacidad única de impactar positivamente en el mundo. Estamos comprometidos a nutrir al mundo de manera segura, responsable y sostenible. Como empresa de propiedad familiar, entregamos alimentos, ingredientes, soluciones agrícolas y productos industriales esenciales para la vida cotidiana. Conectamos a los agricultores con los mercados para ayudarlos a prosperar y vinculamos a los clientes con ingredientes para crear comidas que a la gente le encanta. Desde huevos hasta aceites comestibles, sal hasta cuidado de la piel, y alimento para animales hasta combustibles alternativos, nuestros 160,000 colegas en 70 países producen productos esenciales que tocan miles de millones de vidas a diario. Únete a nosotros en Cargill para alcanzar tu propósito superior.

Propósito e Impacto del Trabajo

El Ingeniero Sr. de Datos diseñará, construirá y operará soluciones centradas en datos de alto rendimiento utilizando capacidades avanzadas de big data para nuestro entorno de plataforma de datos. En este rol crucial, servirás como experto en rutas de acceso a datos y técnicas, colaborando con analistas dentro del equipo funcional de análisis de datos. Tus responsabilidades incluyen el diseño de estructuras y canalizaciones de datos, implementación de transformaciones de datos, combinaciones y agregaciones.

Responsabilidades Clave

• Trabajar con negocios, propietarios de aplicaciones y procesos, y equipos de productos para definir requisitos y diseñar soluciones de big data y analíticas.
• Participar en procesos de toma de decisiones relacionados con la arquitectura de soluciones.
• Desarrollar soluciones técnicas utilizando tecnologías de big data y basadas en la nube, asegurando sostenibilidad y robustez.
• Realizar modelado de datos, preparar datos en bases de datos para herramientas analíticas, y configurar y desarrollar canalizaciones de datos para optimizar activos de datos.
• Proporcionar soporte técnico durante todas las fases del ciclo de vida de la solución.
• Construir prototipos para probar nuevos conceptos, contribuyendo con ideas y código para mejorar la infraestructura de software central, patrones y estándares.
• Impulsar la adopción de nuevas tecnologías y métodos dentro del equipo funcional de datos y análisis y mentorar a ingenieros de datos junior.
• Manejar problemas complejos de manera independiente con supervisión mínima, escalando solo los problemas más desafiantes según sea necesario.
• Realizar otras tareas según se asignen.

Calificaciones

Calificaciones Mínimas

• Título de licenciatura en un campo relacionado o experiencia equivalente.
• Mínimo de cuatro años de experiencia laboral relacionada.
• Habilidades avanzadas de inglés, tanto oral como escrito.

Calificaciones Preferidas

• Experiencia con herramientas de recolección e ingestión de datos como AWS Glue, Kafka Connect y Flink.
• Experiencia manejando grandes conjuntos de datos heterogéneos con herramientas como Iceberg, Parquet, Avro, ORC, S3, HFDS, HIVE y Kudu.
• Experiencia con herramientas de transformación y modelado, incluyendo marcos de transformación basados en SQL, orquestación y marcos de calidad como dbt, Apache Nifi, Talend, AWS Glue, Airflow, Dagster, Great Expectations y Oozie.
• Experiencia en entornos de Big Data utilizando Hadoop y Spark.
• Experiencia con plataformas en la nube como AWS, GCP o Azure.
• Conocimiento de plataformas de streaming e integración de flujos o middleware como Kafka, Flink, JMS o Kinesis.
• Habilidades sólidas de programación en SQL, Python, R, Java, Scala o lenguajes equivalentes.
• Competencia en herramientas de ingeniería como Docker, Git y servicios de orquestación de contenedores.
• Experiencia con modelos de DevOps, incluyendo mejores prácticas para la gestión de código, integración continua y estrategias de despliegue.
• Comprensión de consideraciones de gobernanza de datos, incluyendo calidad, privacidad y seguridad para el desarrollo y consumo de productos de datos.