Ingénieur Logiciel Senior, Acquisition de Données

Ingénieur Logiciel Senior. Acquisition de données

Aperçu :

L'équipe d'acquisition de données au sein de l'organisation de pré-formation à OpenAI est responsable de tous les aspects de la collecte de données pour soutenir nos opérations de formation de modèles. Notre équipe gère les services de crawl web et de GPTBot et travaille en étroite collaboration avec les équipes de traitement des données, d'architecture et de mise à l'échelle. Nous recherchons un Ingénieur Logiciel Senior qualifié pour rejoindre notre équipe d'acquisition de données.

Responsabilités :

• Assumer et diriger des projets d'ingénierie dans le domaine de l'acquisition de données, y compris le crawl web, l'ingestion de données et la recherche.
• Collaborer avec d'autres sous-équipes, telles que le traitement des données, l'architecture et la mise à l'échelle, pour assurer un flux de données fluide et une opérabilité du système.
• Travailler en étroite collaboration avec l'équipe juridique pour gérer toutes les questions relatives à la conformité ou à la confidentialité des données.
• Développer et déployer des systèmes distribués hautement évolutifs capables de gérer des pétaoctets à des exaoctets de données.
• Architecturer et implémenter des algorithmes pour les capacités d'indexation et de recherche des données.
• Construire et maintenir des services backend pour le stockage des données, y compris le travail avec des bases de données clé-valeur et la synchronisation.
• Déployer des solutions dans un environnement Kubernetes Infrastructure-as-Code et effectuer des contrôles système de routine.
• Conduire et analyser des expériences sur les données pour fournir des insights sur les performances du système.

Qualifications :

• Bachelor/Master/Doctorat en informatique ou dans un domaine connexe.
• Plus de 5 ans d'expérience dans le développement de logiciels.
• Expérience avec de grands crawlers web un plus
• Expertise forte dans les grands systèmes distribués avec état et le traitement des données.
• Maîtrise de Kubernetes, et des concepts d'Infrastructure-as-Code.
• Volonté et enthousiasme pour essayer de nouvelles approches et technologies.
• Capacité à gérer plusieurs tâches et à s'adapter à l'évolution des priorités.
• Fortes compétences en communication, à la fois écrite et verbale.

À propos de OpenAI

OpenAI est une entreprise de recherche et de déploiement d'IA dédiée à assurer que l'intelligence artificielle à usage général profite à toute l'humanité. Nous repoussons les limites des capacités des systèmes d'IA et cherchons à les déployer en toute sécurité dans le monde à travers nos produits. L'IA est un outil extrêmement puissant qui doit être créé avec la sécurité et les besoins humains en son cœur, et pour réaliser notre mission, nous devons englober et valoriser les nombreuses perspectives, voix et expériences différentes qui forment le spectre complet de l'humanité.

Chez OpenAI, nous pensons que l'IA a le potentiel d'aider les gens à résoudre d'immenses défis mondiaux, et nous souhaitons que les avantages de l'IA soient largement partagés. Rejoignez-nous pour façonner l'avenir de la technologie.

Rémunération, avantages et avantages

La fourchette de salaire annuel pour ce poste est de 200 000 $ à 370 000 $. La rémunération totale comprend également une généreuse participation au capital et des avantages.

• Assurance médicale, dentaire et vision pour vous et votre famille
• Soutien à la santé mentale et au bien-être
• Plan 401(k) avec correspondance de 4%
• Congés illimités et plus de 18 jours fériés par an
• Congé parental rémunéré (20 semaines) et soutien à la planification familiale
• Allocation annuelle pour la formation et le développement (1 500 $ par an)

Nous sommes un employeur garantissant l'égalité des chances et ne faisons pas de discrimination sur la base de la race, de la religion, de l'origine nationale, du sexe, de l'orientation sexuelle, de l'âge, du statut de vétéran, du handicap ou de tout autre statut protégé par la loi. Conformément à l'ordonnance de San Francisco sur l'équité en matière d'emploi, nous prendrons en compte les candidats qualifiés avec des antécédents d'arrestation et de condamnation.

Nous nous engageons à fournir des accommodements raisonnables aux candidats handicapés, et les demandes peuvent être faites via ce lien.

Politique de confidentialité des candidats d'OpenAI aux États-Unis