Ingeniero de Backline - Spark

CSQ125R2

Misión

Como Ingeniero de Soluciones Técnicas de Segunda Línea, ayudarás a nuestros clientes a tener éxito con la plataforma Databricks al resolver escalaciones técnicas importantes del cliente y el equipo de soporte. Serás el puente técnico entre el soporte y la ingeniería y la primera línea de defensa para la ingeniería. Te asegurarás de que todos los problemas sean revisados por ti antes de que lleguen al equipo de ingeniería. Reportarás al Director/Jefe Técnico del Equipo de Escalaciones de Segunda Línea.

Resultados

• Diagnosticar, resolver y sugerir un análisis profundo a nivel de código de Spark para abordar problemas complejos del cliente relacionados con los internals del núcleo de Spark, Spark SQL, Structured Streaming y Databricks Delta.
• Proporcionar orientación sobre las mejores prácticas en torno al rendimiento en tiempo de ejecución de Spark y el uso de las bibliotecas y API del núcleo de Spark para soluciones personalizadas desarrolladas por los clientes de Databricks.
• Ayudar al equipo de soporte con guías detalladas de solución de problemas y runbooks.
• Contribuir a los programas de automatización y herramientas para hacer la solución de problemas diarios eficiente.
• Trabajar con el Equipo de Ingeniería de Spark y difundir el conocimiento de las próximas funciones y lanzamientos.
• Identificar errores de Spark y sugerir posibles soluciones temporales.
• Demostrar propiedad y coordinar con los equipos de ingeniería y escalación para lograr la resolución de problemas y solicitudes del cliente.
• Participar en la rotación de llamadas durante los fines de semana y los días de semana.

Competencias

• Mínimo 6 años de experiencia en desarrollo, pruebas y mantenimiento de aplicaciones basadas en Python o Java o Scala.
• Conocimiento en compilar, construir y navegar por el código fuente de Apache Spark.
• Experiencia en identificar y aplicar parches/correcciones de errores al código fuente de Apache Spark.
• Experiencia en las pipelines de datos de Big Data/Hadoop/Spark/Kafka/Elasticsearch.
• Experiencia práctica con sistemas de bases de datos basados en SQL.
• Se requiere experiencia en la resolución de problemas basados en JVM, GC, y volcados de hilos.
• Experiencia con servicios relacionados con AWS o Azure.
• Se requiere un título de licenciatura en Ciencias de la Computación o un campo relacionado.