Staff Site Reliability Engineer (Hadoop Platform, Hive, Spark, Python)

Título del Puesto: Ingeniero de Confiabilidad de Sitio Senior (Plataforma Hadoop, Hive, Spark, Python)

Descripción de la Empresa

Visa es un líder mundial en pagos digitales, facilitando más de 259 mil millones de transacciones anualmente en más de 200 países y territorios. Nuestra misión es conectar el mundo a través de la red de pagos más innovadora, confiable y segura, mejorando la capacidad de individuos, negocios y economías para prosperar. En Visa, estamos comprometidos con fomentar una economía digital universal que eleve a todos, en todas partes. Únete a Visa y forma parte de un equipo que valora la innovación y el propósito. Experimenta lo que es hacer un impacto en una de las instituciones financieras más influyentes del mundo: la vida en Visa te espera.

Descripción del Puesto

Actualmente estamos buscando un Ingeniero de Confiabilidad de Sitio Senior para proporcionar soporte y mantenimiento completos en la plataforma Hadoop y sus tecnologías asociadas, como Hive, SPARK y HDFS. Este rol abarca una variedad de responsabilidades:

Responsabilidades:

• Soporte de Ventanilla Única: Aplica tu profundo conocimiento de Hadoop y herramientas relacionadas para realizar análisis de causa raíz para problemas de configuración/código de plataforma y usuarios.
• Configuración del Sistema: Recomendar ajustes al sistema a los equipos de ingeniería de la plataforma DAP basándose en registros de usuarios y actividades del sistema.
• Ajuste de Rendimiento: Guiar a los miembros del equipo en la escritura de consultas eficientes y aplicar técnicas avanzadas de ajuste y optimización de rendimiento para soluciones de big data.
• Resolución de Problemas entre Equipos Técnicos: Solucionar y resolver desafíos técnicos complejos, coordinando con los equipos de Plataforma de Tecnología/Datos apropiados para las soluciones.
• Ingeniería de Confiabilidad: Desarrollar informes para rastrear el rendimiento, métricas de resolución y detección proactiva de problemas.
• Horas de Oficina y Enlace: Gestionar llamadas en diversas zonas horarias para asegurar la entrega oportuna a los clientes.
• Catalogación y Compartir Conocimiento: Comparte tu conocimiento y experiencia con colegas a través de Wikis y otros canales de comunicación, enfocándose en problemas que afectan a múltiples usuarios.
• Desarrollar Estándares: Crear configuraciones estándar para diversas cargas de trabajo de VCA para mejorar la salud del clúster y la eficiencia operativa.

Este es un rol híbrido que requiere tanto presencia remota como en sitio, con expectativas de estar en la oficina 2-3 días por semana dependiendo de las necesidades del negocio.

Calificaciones

Calificaciones Básicas:

• 7+ años de experiencia profesional relevante con un grado de Bachiller o grados avanzados con varios niveles de experiencia.

Calificaciones Preferidas:

• Amplia experiencia en el desarrollo de pipelines de datos usando PySpark, Hive y Airflow.
• Capacidad probada para solucionar problemas y depurar dentro de entornos Hadoop.
• Experiencia práctica en ajuste de rendimiento en plataformas Hadoop y desarrollo de Python.
• Familiaridad con la arquitectura del ecosistema Hadoop y sus componentes como Zookeeper, HDFS, Yarn, Hive y Spark.
• Experiencia con herramientas de seguridad como Kerberos y Ranger, y un entendimiento de las funciones del sistema central incluyendo operaciones Linux, redes y almacenamiento de memoria.
• Fuertes habilidades de comunicación y