Ingeniero de Datos

Job expired!

La Red NewRich Network está buscando un Ingeniero de Datos a tiempo parcial (Opción de pasar a tiempo completo en 6 meses) con experiencia en la construcción de integraciones de datos utilizando la pila de tecnología AWS y Google Cloud como parte de la cartera de productos del equipo.

Somos una empresa que se centra 100% en entregar información digital y soluciones a nuestros clientes en todo el mundo. Nuestros proyectos de desarrollo están en el núcleo de nuestra organización, al igual que nuestro equipo de desarrollo. Aquí no somos solo monos de código, somos creadores.

Nuestro equipo de desarrollo también es 100% remoto. Por lo tanto, si estás buscando una oportunidad para trabajar desde casa y te apasiona crear plataformas para el nuevo mundo, ¡queremos escuchar de ti!

Requisitos

Diseñar y construir aplicaciones que realicen análisis de datos, transformaciones, agregaciones y otras mejoras en grandes conjuntos de datos en un entorno AWS basado en Spark (EMR, S3, Glue, Redshift, Athena)
Evaluar diversos modelos de tuberías, herramientas y entornos e implementar estos para empujar datos desde nuestras fuentes a través de tus transformaciones y finalmente a nuestros clientes
Trabajar con los equipos de gestión de productos e investigación de datos para crear prototipos y probar nuevas ideas para llevarlas a producción
Trabajar en un entorno de ritmo rápido, de innovación y prueba.

Lo que harás:

Colaborar con arquitectos de datos, arquitectos empresariales, consultores de soluciones y equipos de ingeniería de productos para recopilar requisitos de integración de datos de los clientes, conceptualizar soluciones y construir la pila de tecnología requerida
Colaborar con el equipo de ingeniería del cliente de la empresa para identificar fuentes de datos, perfilar y cuantificar la calidad de las fuentes de datos, desarrollar herramientas para preparar datos y construir tuberías de datos para integrar las fuentes de datos del cliente y las fuentes de datos de terceros.

Desarrollar nuevas características y mejorar las integraciones de datos existentes con el ecosistema de datos del cliente

Fomentar en el equipo el pensamiento fuera de la caja y superar los obstáculos de la ingeniería mientras incorpora nuevos principios de diseño innovadores.
Colaborar con un Gestor de Proyectos para facturar y prever el tiempo para las soluciones del propietario del producto

Construcción de tuberías de datos
Reconciliacion de datos perdidos
Adquirir conjuntos de datos que se alineen con las necesidades del negocio
Desarrollar algoritmos para transformar los datos en información útil y accionable
Construir, probar y mantener arquitecturas de tuberías de base de datos
Colaborar con la dirección para entender los objetivos de la empresa
Crear nuevos métodos de validación de datos y protocolos de análisis de datos
Asegurar el cumplimiento de las políticas de gobernabilidad y seguridad de los datos

Lo que necesitas para tener éxito:

4 + años de experiencia en Ingeniería de Datos
Las excelentes habilidades de comunicación e interpersonales son imprescindibles.
Titulación universitaria en Informática, Ingeniería o una disciplina relacionada - Preferible pero no obligatorio
3+ años de experiencia trabajando en aplicaciones Apache Spark utilizando Python (PySpark) o Scala
Experiencia en la creación de trabajos en Spark que operen al menos con 1 billón de registros
Sólido conocimiento de la arquitectura y los estándares de ETL
Experiencia en desarrollo de software trabajando con Apache Airflow, Spark, MongoDB, MySQL
Sólido conocimiento de SQL
Alto dominio de Python
Experiencia creando tuberías de datos en un sistema de producción
Experiencia demostrada en la construcción/operación/mantenimiento de integraciones de procesamiento de datos tolerantes a fallas y escalables, utilizando AWS
Experiencia con Docker o Kubernetes es un plus
Habilidad para identificar y resolver problemas asociados a flujos de trabajo de procesamiento de datos a gran escala de grado de producción
Experiencia en la creación y mantenimiento de pruebas unitarias e integración continua.
Pasión por crear tuberías de datos inteligentes que los equipos adorarán usar
Sólida capacidad para manejar numerosos proyectos es imprescindible