Chercheur Principal/Chercheur Scientifique, SEAL

Other
San Francisco
$200 K - $370 K

Full Time

Job expired!

En tant que principal partenaire de données et d'évaluation pour les entreprises IA de pointe, Scale joue un rôle essentiel dans la compréhension des capacités et la protection des grands modèles de langage (LLM).

Le Laboratoire de Sécurité, d'Évaluation et d'Analyse (SEAL) est le nouvel effort de recherche de pointe de Scale, dédié à la construction de produits d'évaluation robustes et à la résolution des problèmes de recherche difficiles en matière d'évaluation et de "red teaming".

Nous sommes activement à la recherche de chercheurs talentueux pour nous rejoindre dans la définition du paysage de la sécurité et de la transparence pour l'ensemble de l'industrie de l'IA. Nous soutenons les collaborations à travers l'industrie et la publication de nos résultats de recherche. Voici une liste des projets représentatifs de SEAL :

Concevoir et mettre en œuvre des références d'évaluation robustes. Mesurer et améliorer la reproductibilité et la fiabilité de l'évaluation.
Rechercher et mettre en œuvre des méthodes de red teaming assistées par des modèles de pointe.
Développer des systèmes de notation automatisés basés sur le LLM de pointe en utilisant l'écosystème Scale pour des données d'entraînement personnalisées.
Développer des techniques d'assistance aux évaluateurs, telles que la modélisation des critiques pour améliorer la qualité de l'évaluation.

Idéalement, vous auriez :

L'engagement envers notre mission de promouvoir des déploiements d'IA sûrs, sécurisés et dignes de confiance dans l'industrie.
Une expérience pratique de la recherche technique en collaboration, avec une maîtrise de cadres tels que Pytorch, Jax ou Tensorflow. Vous devriez également être apte à interpréter la littérature de recherche et à transformer rapidement de nouvelles idées en prototypes.
Un historique de recherche publiée en apprentissage automatique, en particulier dans l'IA générative.
Au moins trois ans d'expérience dans la résolution de problèmes de ML sophistiqués, que ce soit dans un contexte de recherche ou de développement de produit.
De solides compétences en communication écrite et verbale pour travailler au sein d'une équipe cross-fonctionnelle.

Serait un plus :

Une expérience pratique avec le fine-tuning LLM open source ou une participation à des projets de fine-tuning LLM sur mesure utilisant Pytorch/Jax.
Une expérience dans l'élaboration d'évaluations ou un parcours dans des rôles de data science liés aux technologies LLM.
Une expérience de travail avec la technologie en nuage (par exemple, AWS ou GCP) et le développement de modèles d'apprentissage automatique dans un environnement cloud.

Nos entretiens de recherche sont conçus pour évaluer les compétences des candidats en matière de prototypage et de débogage de ML pratiques, leur compréhension des concepts de recherche et leur adéquation avec notre culture organisationnelle. Nous ne poserons pas de questions de style LeetCode.

La fourchette salariale de base pour ce poste à temps plein chez Scale AI à San Francisco, New York ou Seattle, est de 200 000 $ - 370 000 $. Les packages de rémunération chez Scale incluent le salaire de base, l'équité et les avantages sociaux. La plage indiquée sur chaque offre d'emploi reflète le minimum et le maximum ciblés pour les salaires des nouvelles recrues pour le poste, déterminés par le lieu de travail et d'autres facteurs, incluant les compétences liées au travail, l'expérience, la performance en entretien, et l'éducation ou la formation pertinentes. Votre recruteur peut partager plus d'informations sur la plage salariale spécifique pour votre lieu de préférence pendant le processus d'embauche. Les employés de Scale reçoivent également des options d'achat d'actions qui sont accordées sur approbation du conseil d'administration. Vous bénéficierez également d'avantages, y compris, mais sans s'y limiter : une couverture santé, dentaire et visuelle complète, des avantages de retraite, une allocation pour l'apprentissage et le développement, et un généreux PTO. De plus, ce rôle peut être éligible à des avantages supplémentaires tels qu'une allocation pour les déplacements domicile-travail.

À propos de nous :

À Scale, nous croyons que la transition du logiciel traditionnel à l'IA est l'un des changements les plus importants de notre époque. Notre mission est de faire en sorte que cela se produise plus rapidement dans chaque secteur, et notre équipe transforme la façon dont l'apprentissage automatique peut construire des produits innovants. Nos produits fournissent un accès à des données alimentées par l'humain pour des centaines de cas d'utilisation et sont utilisés par des leaders de l'industrie tels que Open AI, Lyft, Meta, GM, Samsung, Airbnb, NVIDIA, et bien d'autres. Nous avons récemment levé 325 millions de dollars lors de notre financement de série E, avec une valorisation de plus de 7 milliards de dollars, et nous élargissons notre équipe pour accélérer le développement des applications IA.

Nous pensons que tout le monde devrait pouvoir se présenter tel qu'il est au travail, c'est pourquoi nous sommes fiers d'être un employeur d'action affirmative et un lieu de travail inclusif et équitable. Nous nous engageons en faveur de l'égalité des chances d'emploi indépendamment de la race, de la couleur, de l'ascendance, de la religion, du sexe, de l'origine nationale, de l'orientation sexuelle, de l'âge, de la citoyenneté, du statut matrimonial, du statut de handicap, de l'identité de genre ou du statut de vétéran.

Nous nous engageons à travailler avec les candidats ayant des handicaps physiques et mentaux et à leur fournir des accommodations raisonnables. Si vous avez besoin d'aide et/ou d'une accommodation raisonnable pour votre candidature ou le processus de recrutement en raison d'un handicap, veuillez nous contacter à [email protected]. Veuillez consulter l'affiche Know Your Rights du Département du Travail des États-Unis pour plus d'informations.

Nous respectons les dispositions en matière de Transparence Salariale du Département du Travail des États-Unis.

VEUILLEZ NOTER : Nous collectons, conservons et utilisons des données personnelles à des fins professionnelles, notamment pour vous informer des opportunités d'emploi qui pourraient vous intéresser et pour partager avec nos affiliés. Nous limitons les données personnelles que nous collectons à celles que nous jugeons appropriées et nécessaires pour gérer les besoins des candidats, fournir nos services, et se conformer aux lois applicables. Toutes les informations que nous recueillons en relation avec votre candidature seront traitées conformément à nos politiques internes et programmes visant à protéger les données personnelles.