Senior Data Engineer - Acquisition & Infrastructure

Job expired!

Nous recherchons un Ingénieur de Données Senior compétent pour rejoindre Eon Systems, une entreprise pionnière à l'intersection des neurosciences et de l'intelligence artificielle. Ce poste se concentre sur l'acquisition, le traitement et la manipulation de données neuroscientifiques complexes, jouant un rôle crucial dans le façonnage de nos capacités d'apprentissage automatique.

En tant que membre clé de notre équipe dédiée, vous allez :

  • Construire, maintenir et optimiser des pipelines de données basés sur le cloud, de la capture de données au traitement, en s'assurant qu'ils répondent aux besoins de nos modèles d'apprentissage automatique.
  • Gérer l'acquisition de pétaoctets de jeux de données en ligne divers et multimodaux.
  • Évaluer, nettoyer et organiser des ensembles de données non structurés et bruyants pour les préparer à des applications analytiques.
  • Travailler en étroite collaboration avec les ingénieurs en ML pour développer des API permettant d'alimenter les environnements d'entraînement avec des données cérébrales traitées.
  • Améliorer la fonctionnalité, l'évolutivité et l'accessibilité des pipelines de données dans leur ensemble.
  • Collaborer avec les équipes d'acquisition de données cérébrales humaines et animales et les groupes d'ingénierie en IA pour faire le lien entre la collecte de données et l'application des modèles.
  • Concevoir et créer des processus de validation et d'assurance qualité pour maintenir des normes de données élevées.

Au cours de votre mandat, vous serez impliqué dans des projets tels que :

  • Télécharger et prétraiter des jeux de données neuroscientifiques de plus de 10 dépôts et garantir leur intégration dans nos pipelines de formation.
  • Créer un système de validation innovant pour évaluer automatiquement et améliorer la qualité des jeux de données en fonction de métriques spécifiques.
  • Extraire et harmoniser les métadonnées de diverses sources pour enrichir davantage les ensembles de données.
  • Visualiser les indicateurs clés de performance pour évaluer et améliorer l'efficacité des données traitées.

Le candidat idéal pour ce poste devrait démontrer :

  • Une expérience avérée dans la gestion, le prétraitement et l'organisation de grands ensembles de données désordonnés, non structurés, de préférence dans un contexte de recherche scientifique.
  • Une expertise dans le développement et la maintenance de pipelines de données basés sur le cloud, idéalement avec une connaissance d'AWS et d'autres plateformes cloud.
  • Une forte familiarité avec les cadres d'apprentissage automatique et les implications du prétraitement des données sur la performance du modèle.
  • Capable de mettre en œuvre des procédures de validation et de nettoyage des données efficaces.
  • D'excellentes compétences en gestion de projet et un engagement à fournir des solutions techniques dans les délais.
  • Des capacités de communication efficaces pour interagir avec des équipes techniques et non techniques.

Les candidats ayant une expérience dans Kafka, Hadoop, EMR, GCP, Spark, ou la gestion de bases de données seront considérés en priorité. Une connaissance des processus ETL, des bases de données SQL/NoSQL et une familiarité avec les tendances politiques et technologiques centrées sur les données sont également très souhaitées.

Eon Systems offre des salaires compétitifs et des packages d'actions conçus pour attirer et retenir les meilleurs talents dans notre domaine.

Si vous êtes prêt à contribuer à des projets d'IA de pointe et à travailler à l'av