Staff Engineer, Data Analytics Engineering ( 6+ yrs Apache ,Spark ,Python and PySpark )

Chez Western Digital, nous ne nous contentons pas de façonner le futur de la technologie ; nous rendons le jadis impossible, possible. Notre engagement envers l'innovation nous permet de jouer un rôle crucial dans le moteur des grandes avancées - de la création de plateformes qui rendent les villes plus intelligentes aux systèmes qui rendent la connectivité un jeu d'enfant. Désormais, nous sommes à la recherche d'un talentueux Ingénieur Staff, Ingénierie de l'Analytique des Données pour rejoindre notre équipe.

Western Digital est une force dynamique dans le domaine de la technologie, connue pour son portfolio étendu de technologies, dispositifs de stockage, et plateformes pour les entreprises et les consommateurs de même. En repoussant les frontières de la technologie, nous fournissons des solutions centrées sur les données sous les marques Western Digital®, G-Technology™, SanDisk®, et WD®. À mesure que nous nous étendons, notre besoin en membres d'équipe hautement qualifiés et innovants grandit.

Nous recherchons un Ingénieur Staff, Ingénierie de l'Analytique des Données avec une solide expérience en ETL, Apache Spark, et le streaming de données en temps réel. Ce rôle exige au moins 6 ans d'expérience dans le développement de travaux ETL en utilisant les outils ETL leaders de l'industrie et une preuve d'expérience dans le traitement de données à grande échelle.

• Concevoir, développer, et optimiser les applications Apache Spark.
• Mettre en œuvre la transformation de données en utilisant les RDDs et Data Frames de Spark.
• Développer et maintenir des pipelines Apache Kafka pour le streaming de données en temps réel.
• L'expertise en Python, PySpark, Scala, NIFI, et SQL/Procédure est essentielle.
• La familiarité avec Unix/Linux OS, Postgres, les bases de données Redshift/Snowflake, et les outils CI/CD tels que Jenkins, Docker, Kubernetes est préférée.
• Créer et planifier des travaux à l'aide d'Airflow, intégrer des pipelines de données avec des outils de surveillance comme Splunk et Grafana.

Le candidat idéal aura un diplôme de Bachelor en Informatique ou en Ingénierie, avec un Master préféré. La certification de développeur AWS, ainsi que toutes certifications dans les méthodologies SDLC, seraient avantageuses.

Chez Western Digital, nous favorisons un environnement inclusif qui encourage la diversité et l'innovation. Nous croyons qu'un mélange de perspectives variées aboutit à de meilleurs résultats non seulement pour notre équipe mais aussi pour la technologie que nous créons. Nous nous engageons à soutenir tous nos membres du personnel à travers un lieu de travail divers et inclusif.

Si vous avez les compétences et la passion pour la technologie, nous vous invitons à nous rejoindre dans le développement de solutions qui ont un impact à l'échelle mondiale. Veuillez vous assurer que votre candidature comprend un CV détaillé et toutes certifications pertinentes. Pour les demandes d'accommodations durant le processus d'embauche, veuillez contacter [email protected].

Soyez le catalyseur pour les solutions de données de nouvelle génération chez Western Digital—où l'innovation rencontre l'impact.