Sr Big Data Engineer (GCP)- Airflow and Oozie

Acerca del rol:

Estamos en la búsqueda de un Ingeniero Senior en Big Data competente para mejorar nuestro equipo dinámico en Rackspace Technology. El candidato debe tener una profunda experiencia en el desarrollo y la optimización de sistemas de procesamiento por lotes y un excelente conocimiento de las tecnologías de nube pública, particularmente Google Cloud Platform (GCP). Nuestro candidato ideal prospera en un entorno remoto, exhibe habilidades de comunicación excepcionales y es capaz de resolver desafíos complejos de manera independiente con soluciones innovadoras.

- Desarrollar código de alta calidad, escalable y robusto para sistemas de procesamiento por lotes utilizando herramientas como Hadoop, Oozie, Pig, Hive, Map Reduce, Spark (Java) y Python.

- Diseñar, gestionar y optimizar flujos de trabajo de datos utilizando Oozie y Airflow dentro del ecosistema Apache Hadoop.

- Utilizar GCP para soluciones eficientes de procesamiento y almacenamiento de big data.

- Implementar las mejores prácticas de automatización/DevOps como CI/CD e Infraestructura como Código (IaC).

- Profunda experiencia con servicios gestionados de GCP y una comprensión de los sistemas de procesamiento por lotes basados en la nube.

- Fuertes habilidades de programación en Java (específicamente Spark), Python, Pig y SQL.

- Conocimiento experto de servicios públicos en la nube, enfocándose en GCP, y familiaridad con BigTable y Redis.

- Proficiencia a través del ecosistema Apache Hadoop incluyendo Oozie, Pig, Hive y Map Reduce.

- Experiencia con principios y herramientas DevOps para integración y despliegue continuos (CI/CD), e Infraestructura como Código (IaC) como Terraform.

- Excelentes habilidades para resolver problemas con la capacidad de pensar críticamente y ofrecer soluciones innovadoras.

- Capacidad probada para trabajar de manera efectiva en un entorno remoto con sólidas habilidades de comunicación escrita y verbal.

- Amplia experiencia en ingeniería de sistemas de procesamiento por lotes a gran escala.

- Certificación de Google Associate Cloud Engineer o cualquier otra certificación profesional de nivel superior de Google Cloud.

- Al menos 10 años de experiencia en roles de software/tecnología de cara al cliente o consultoría.

- Mínimo 5 años de experiencia con migraciones de "on-premises a cloud" o transformaciones de IT.

- Más de 5 años construyendo y operando soluciones en GCP, AWS o Azure.

- Un grado técnico en Ciencias de la Computación, Ingeniería de Software, o un campo relacionado.

Como los expertos en soluciones multicloud, combinamos nuestra experiencia con las tecnologías líderes del mundo a través de aplicaciones, datos y seguridad para entregar soluciones de punta a punta. Somos reconocidos por asesorar a los clientes basados en sus desafíos comerciales, diseñar soluciones escalables y optimizar los retornos hacia el futuro. Constantemente nombrados como uno de los mejores lugares para trabajar por Fortune, Forbes y Glassdoor, atraemos y desarrollamos talento de primer nivel. Únete a nuestra misión para abrazar la tecnología, empoderar a los clientes y entregar el futuro.

Creemos en la inclusividad y estamos comprometidos a proporcionar igualdad de oportunidades de empleo. Respetamos y buscamos la diversidad de experiencias, perspectivas y habilidades entre nuestros miembros del equipo a nivel mundial. Si requieres adaptaciones o tienes necesidades especiales, por favor infórmanos durante el proceso de solicitud.

¡Aplica hoy y conviértete en un miembro valioso de nuestro equipo ganador!

Información adicional:

Nombre de la Compañía: Rackspace

Título del Trabajo: Sr Big Data Engineer (GCP) - Airflow y Oozie