Sr. Ingeniero de Datos - GCP (India)

Job expired!

Estamos buscando un Ingeniero de Datos Senior en GCP para unirse a nuestro equipo de ingenieros! Buscamos a alguien confiado, curioso y directo, un gran ajuste para nuestra cultura de empoderamiento y motivación. Tu determinación y comunicación clara harán que nuestras soluciones en la nube sean claras y fáciles de entender. Con tu energética creencia, ayudarás a nuestra marca a resolver problemas de manera fácil y efectiva en la nube. Únase a nosotros si estás emocionado de formar parte de un equipo que valora la claridad, la confianza y la realización de tareas a través de la tecnología en la nube.

Responsabilidades:

  • Diseñar y desarrollar estructuras y tuberías de datos complejas y a gran escala para organizar, recopilar y estandarizar datos para generar conocimientos y satisfacer las necesidades de informes
  • Escribir procesos ETL (Extract / Transform / Load) complejos, diseñar sistemas de bases de datos y desarrollar herramientas para el procesamiento analítico en tiempo real y fuera de línea
  • Desarrollar marcos de referencia, estándares y material de referencia para la arquitectura y los productos asociados
  • Diseñar almacenes de datos y modelos de datos para apoyar a Data Science y otros clientes internos.
  • Actuar como mentor para los miembros junior del equipo para brindar asesoramiento técnico
  • Aplicar el conocimiento de las herramientas y productos de gcp-data para consultar y asesorar sobre esfuerzos adicionales en múltiples dominios que abarcan toda la empresa
  • Colaborar con el equipo de ciencia de datos para transformar datos e integrar algoritmos y modelos en sistemas de alta disponibilidad y producción
  • Usar conocimientos profundos sobre la arquitectura de Hadoop y los comandos de HDFS y la experiencia en el diseño y optimización de consultas para construir tuberías de datos escalables, modulares y eficientes
  • Utilizar habilidades avanzadas de programación en Python, Java, PySpark, o en uno de los principales lenguajes para construir robustas tuberías de datos y sistemas dinámicos
  • Integrar datos de una variedad de fuentes, asegurando que se adhieran a los estándares de calidad y accesibilidad de los datos
  • Experimentar con las herramientas disponibles y asesorar sobre nuevas herramientas para determinar la solución óptima dada los requisitos dictados por el modelo/caso de uso


Requisitos:

  • 5+ años de experiencia en Ingeniería de Datos
  • 5+ años de experiencia con PySpark (Spark/Scala)
  • 3+ años de conocimientos avanzados en arquitectura de Hadoop, comandos HDFS y experiencia en diseño y optimización de consultas contra datos en el entorno HDFS
  • 2+ años de experiencia con Google Cloud Platform ( GCP )
  • Experiencia con scripts de shell bash, utilidades UNIX y comandos UNIX
  • Experiencia en la construcción e implementación de soluciones de transformación y procesamiento de datos
  • Conocimientos avanzados en Java, Python, Hive, Cassandra, Pig, MySQL o NoSQL o similar
  • Si eres apasionado por DevOps y GCP, y te sientes cómodo en un ambiente colaborativo y de ritmo acelerado
  • Te gusta resolver rompecabezas y descubrir cómo funcionan las cosas, cómo operan, etc.
  • Te desenvuelves bien en un entorno que constantemente te exige aprender.