SEAL Research Scientist/ Research Engineer

Présentation de l'entreprise :

Scale AI, le principal partenaire de données et d'évaluation pour les principales entreprises d'IA, est à l'avant-garde de la transition vers l'IA. Nous alimentons les modèles de langage avancés (LLM), les modèles génératifs et les systèmes de vision par ordinateur les plus avancés. Endossé par des géants de l'industrie comme OpenAI, Meta et Microsoft, ainsi que par des organismes gouvernementaux tels que l'armée et l'armée de l'air américaines, Scale AI révolutionne le déploiement de l'IA dans divers secteurs.

À propos du poste :

Nous sommes ravis d'annoncer des opportunités au sein de notre Laboratoire de Sécurité, Évaluations et Analyse (SEAL), dédié à l'amélioration de la sécurité et de la transparence de l'IA. En tant que chercheur ou ingénieur recherche SEAL, vous contribuerez à des projets de recherche et de développement pionniers tels que :

• Concevoir et mettre en œuvre des benchmarks d'évaluation robustes pour la reproductibilité et la fiabilité.
• Développer des méthodes de red teaming assistées par modèle à la pointe de la technologie.
• Créer des systèmes de notation automatisés basés sur LLM de pointe, en utilisant l'écosystème Scale.
• Améliorer la qualité des évaluations avec des techniques d'assistance aux évaluateurs innovantes et la modélisation des critiques.

Qualifications préférées :

Les candidats idéaux devraient démontrer :

• Un engagement à promouvoir des déploiements d'IA sûrs, sécurisés et dignes de confiance.
• Une expérience pratique dans la conduite de recherches techniques, avec une maîtrise de cadres tels que PyTorch, JAX, ou TensorFlow.
• Un solide portefeuille de recherches publiées, de préférence en IA générative.
• Au moins trois ans d'expérience dans la résolution de défis complexes en ML dans des contextes de recherche ou de développement de produits.
• D'excellentes compétences en communication, capable de prospérer dans un environnement d'équipe interfonctionnel.

L'expérience des technologies cloud telles que AWS ou GCP, et la familiarité avec le fine-tuning de LLM sont avantageuses.

Rémunération et avantages :

Scale AI offre des salaires compétitifs allant de 176 000 $ à 300 000 $ selon le lieu, les compétences et l'expérience. Les avantages incluent des actions, une couverture santé complète, des avantages de retraite et une politique de congés payés généreuse. Des avantages supplémentaires tels qu'une allocation de transport peuvent également être disponibles.

Notre processus de recrutement :

Nous donnons la priorité aux compétences pratiques en prototypage et débogage ML, à la compréhension des concepts de recherche complexes et à l'adéquation culturelle par rapport aux tests théoriques comme LeetCode. Nos entretiens sont adaptés pour évaluer efficacement ces compétences.

Engagement en faveur de l'inclusion :

Scale AI est fier d'être un lieu de travail offrant l'égalité des chances et un employeur d'action affirmative. Nous nous engageons à l'égalité des chances d'emploi indépendamment de la race, de la couleur, de l'ascendance, de la religion, du sexe, de l'origine nationale, de l'orientation sexuelle, de l'âge, de la citoyenneté, de l'état matrimonial, du handicap, de l'identité de genre ou du statut d'ancien combattant. Nous offrons également des aménagements pour