Data Architect (AWS ,Pyspark)

Empresa: Arthur Grand Technologies Inc.

Ubicación: Wilmington, DE / Jersey City, NJ

Duración: Contrato a Largo Plazo

Sitio Web: www.arthurgrand.com

Arthur Grand Technologies es un proveedor líder de servicios de consultoría en tecnología y dotación de personal, con un sólido historial de duplicar nuestros ingresos año tras año durante los últimos 5 años. Nuestros clientes son testimonio de nuestras relaciones duraderas y satisfacción del cliente. Nuestro equipo de liderazgo aporta más de 20 años de experiencia de las principales firmas de consultoría. Como empresa de propiedad minoritaria, estamos dedicados a fomentar la diversidad y la inclusión dentro de nuestra fuerza laboral.

Creemos en mantener a nuestros empleados comprometidos a través de proyectos desafiantes e interesantes. Ofrecemos beneficios competitivos, así como oportunidades continuas para el crecimiento y desarrollo profesional.

Arthur Grand Technologies está buscando un Arquitecto de Datos altamente motivado y calificado para unirse a nuestro equipo y apoyar a uno de nuestros clientes clave.

Responsabilidades Principales:

• Entregar soluciones de Ingeniería y Analítica de Datos basadas en AWS, PySpark y Databricks.
• Construir y operar almacenes de datos o lagos de datos muy grandes.
• Optimizar procesos ETL, incluyendo diseño, codificación y ajuste de procesos de grandes datos utilizando Apache Spark.
• Crear aplicaciones de pipeline de datos para transmitir datos.
• Crear trabajos en Scala/Spark para la transformación y agregación de datos.
• Producir pruebas unitarias para las transformaciones de Spark y métodos auxiliares.
• Escribir documentación estilo Scaladoc para todo el código.
• Diseñar pipelines de procesamiento de datos usando Scala, enfocándose en el paradigma de programación funcional.
• Trabajar con tecnologías como Embedded Cassandra, Apache Spark 2.x, y realizar ajustes de consultas Spark y optimización de rendimiento.
• Integrarse con bases de datos SQL, incluyendo Microsoft, Oracle, Postgres y MySQL.
• Se prefiere experiencia con DFS, S3, Cassandra y DynamoDB.

Habilidades y Experiencia Requeridas:

• 12+ años de experiencia con proyectos de clientes que involucren AWS, PySpark y Databricks.
• Competencia en Scala (programación funcional) y marcos de prueba relacionados (Scalatest, JUnit, Mockito).
• Fuertes habilidades en desarrollo de bases de datos a través de proyectos de migración.

Aplica hoy para unirte a nuestro equipo innovador comprometido con la excelencia.

Gracias,

Afrah Faiza

Arthur Grand Technologies Inc.

Arthur Grand Technologies es un Empleador que ofrece igualdad de oportunidades (incluyendo discapacidad/veteranos).

Su información se mantendrá confidencial de acuerdo con las pautas de EEO.

Título del Trabajo: Arquitecto de Datos (AWS, PySpark)