Sr. Desarrollador de Databricks

El Desarrollador Senior de Databricks será responsable de implementar y mantener soluciones en la plataforma AWS Databricks. Será responsable de coordinar las solicitudes de datos de los diferentes equipos, revisar y aprobar enfoques eficientes para ingerir, extraer, transformar y mantener datos en un modelo multi-hop. Además, trabajará con miembros del equipo para asesorar a otros desarrolladores para ampliar su conocimiento y experiencia. Trabajarás en un entorno de procesamiento rápido y de alto volumen, donde la calidad y la atención al detalle son vitales.
 
RESPONSABILIDADES PRINCIPALES
•    Diseñar y desarrollar soluciones Databricks de alto rendimiento y seguras usando Python, Spark, PySpark, Delta tables, UDP y Kafka
•    Crear documentos técnicos de alta calidad que incluyan mapeo de datos, procesos de datos y guías de soporte operativo
•    Traducir los requisitos comerciales en diseño de modelos de datos y soluciones técnicas
•    Desarrollar tuberías de ingestión de datos utilizando Python, Spark & PySpark para soportar procesos de ingestión en tiempo real y por lotes
•    Mantener los procesos del lago de datos y las tuberías, lo que incluye la solución de problemas, la optimización del rendimiento y la mejora de la calidad de los datos
•    Trabajar en estrecha colaboración con los líderes técnicos, los gerentes de producto y el equipo de informes para recopilar los requisitos funcionales y del sistema
•    Trabajar en un entorno de ritmo rápido y desempeñarse de manera efectiva en un entorno de desarrollo ágil
 
REQUISITOS DE CONOCIMIENTOS Y HABILIDADES
•    Grado de Bachiller en Ciencias de la Computación o Sistemas de Información o título equivalente
•    Debe tener más de 8 años de experiencia en desarrollo de aplicaciones usando Python, Spark, PySpark, Java, Junit, Maven y su ecosistema
•    Debe tener más de 4 años de experiencia práctica en AWS Databricks y tecnologías relacionadas como MapReduce, Spark, Hive, Parquet y AVRO
•    Buena experiencia en la implementación de proyectos DW BI de principio a fin, especialmente en el desarrollo de almacenes de datos y data marts
•    Experiencia práctica extensiva en las operaciones RDD, Data frame y Dataset de Spark 3.x
•    Experiencia con el diseño e implementación de un marco ETL/ELT para almacenes/marts complejos.
•    Conocimiento de grandes conjuntos de datos y experiencia con la optimización y resolución de problemas de rendimiento
•    Es un plus tener experiencia en análisis de la nube AWS en Lambda, Athena, S3, EMR, Redshift, Redshift spectrum
•    Debe tener RDBMS: Microsoft SQL Server, Oracle, MySQL
•    Familiaridad con el sistema operativo Linux
•    Comprensión de la arquitectura de datos, réplica y administración
•    Experiencia en trabajar con la ingesta de datos en tiempo real con cualquier herramienta de transmisión
•    Habilidades sólidas de depuración para solucionar problemas de producción
•    Comodidad para trabajar en un entorno de equipo
•    Experiencia práctica con Shell Scripting, Java y SQL
•    Capacidad para identificar problemas y comunicar eficazmente soluciones a sus colegas y gerencia

Labcorp se enorgullece de ser un Empleador de Igualdad de Oportunidades:

Como empleador EOE/AA, Labcorp se esfuerza por la diversidad e inclusión en la fuerza laboral y no tolera el acoso o la discriminación de ningún tipo. Tomamos decisiones de empleo basadas en las necesidades de nuestro negocio y las cualificaciones del individuo y no discriminamos por raza, religión, color, origen nacional, género (incluyendo el embarazo o otras condiciones/necesidades médicas), estado familiar o parental, estado civil, unión civil o de pareja, orientación sexual, identidad de género, expresión de género, apariencia personal, edad, estado de veterano, discapacidad, información genética, o cualquier otra característica protegida legalmente. Animamos a todos a postular.

Para más información sobre cómo recogemos y almacenamos tus datos personales, consulta nuestra Declaración de Privacidad.