PySpark Technical Lead

Descripción de la Empresa:

Sopra Steria, una empresa líder en tecnología en Europa, emplea a 56,000 profesionales en casi 30 países. Nos especializamos en consultoría, servicios digitales y desarrollo de software, impulsando la transformación digital de nuestros clientes para lograr beneficios duraderos y sostenibles. Al ofrecer soluciones integrales, mejoramos la competitividad de grandes empresas y organizaciones, combinando un profundo conocimiento del negocio con tecnologías innovadoras y un enfoque colaborativo. Valoramos mucho a las personas y nos dedicamos a usar herramientas digitales para crear un futuro positivo. En 2023, nuestros ingresos alcanzaron los €5.8 mil millones. El mundo es como lo formamos.

Descripción del Trabajo:

Posición: Líder Técnico PySpark

Habilidades Requeridas:

• Fuerte experiencia en lenguajes de programación como Python, Scala y otros.
• Experiencia práctica con PySpark, incluidas las funciones principales de Dataframe, SparkSQL, Spark Streaming, Hive, Hadoop, Kafka y YARN.
• Competencia en plataformas de big data en la nube, preferiblemente Azure.
• Experiencia con Databricks y codificación con notebooks.
• Experiencia con Airflow y Apache NiFi.
• Competencia en procesamiento y manipulación de datos utilizando SQL y código Python.
• Experiencia profesional en la implementación de tuberías de ingesta de datos usando Data Factory.
• Pericia en la construcción y optimización de tuberías de datos, arquitecturas y conjuntos de datos.
• Conocimiento de sistemas de colas, procesamiento de flujo y almacenes de datos altamente escalables.
• Capacitación a usuarios, soporte al cliente y coordinación con equipos multifuncionales.
• Escritura de servicios o APIs con mucha base de datos.
• Fuerte comprensión de la estructuración del código para la capacidad de prueba.
• Capacidad para realizar estimaciones, liderar técnicamente al equipo y monitorear & rastrear actividades.
• Excelentes habilidades de coordinación y comunicación con los clientes.

Requisitos Deseados:

• Certificaciones Profesionales de Ingeniero de Datos en Databricks.
• Familiaridad con el flujo de trabajo de GIT y Pipelines de CI/CD.
• Experiencia con el entorno de Azure DevOps.
• Experiencia con prácticas y metodologías Agile.
• Experiencia en proyectos de migración (Scala/PySpark).
• Flexibilidad para trabajar en proyectos de soporte y desarrollo.

Experiencia Total Esperada: 06-08 años

Calificaciones:

B.E./B.Tech./MCA

Información Adicional:

En Sopra Steria, estamos comprometidos a luchar contra todas las formas de discriminación. Fomentamos un entorno de trabajo inclusivo y respetuoso para todas las diferencias. Todos nuestros puestos están abiertos a personas con discapacidades.

Nombre de la Empresa: Sopra Steria

Título del Trabajo: Líder Técnico PySpark