Senior Software Engineer, GenAI Safety & Evaluation

À propos du poste

Dans le monde technologique d'aujourd'hui, l'IA révolutionne les logiciels. L'IA améliore exponentiellement l'intelligence humaine, incitant les principales entreprises technologiques à développer des LLM à grande échelle et les entreprises à intégrer l'IA dans leurs produits. Pour garantir la sécurité, l'alignement et l'utilité de ces modèles, des données de haute qualité générées par des humains et une évaluation rigoureuse sont cruciales. Depuis le lancement de ChatGPT, Scale est un leader dans la fourniture de données post-formation, de fine-tuning et d'alignement des préférences humaines (RLHF) via notre Generative AI Data Engine, façonnant l'avenir de l'interaction homme-IA.

Alors que les clients affinent continuellement leurs modèles, une évaluation fiable des performances et l'identification des faiblesses deviennent essentielles. Les experts humains de Scale effectuent ces évaluations, guidant les développeurs de modèles dans l'optimisation de leurs investissements techniques.

L'équipe GenAI Safety & Evaluation de Scale crée une plateforme d'évaluation de modèles de premier ordre pour les clients. Cette plateforme simplifie le lancement de nouveaux workflows d'évaluation, fournit des insights détaillés au niveau des résultats des cas de test, et influence les feuilles de route de développement des modèles. En rejoignant notre équipe, vous façonnerez les pratiques d'évaluation standard de l'industrie, impactant des milliards de personnes dans le monde entier. Vous construirez également des solutions impactantes à partir de zéro au sein de notre équipe produit innovante.

En collaborant avec le laboratoire Safety, Evaluations, and Alignment Lab (SEAL) de Scale et l'équipe d'experts en sécurité, vous promouvrez la sécurité de l'IA grâce à des tests rigoureux de modèles, approuvés par les principales institutions.

Responsabilités clés

• Fournir des fonctionnalités prêtes pour les clients démontrant une excellence en ingénierie.
• Travailler avec les interactions backend, frontend et de modèles ML.
• Superviser le cycle de vie complet du produit, de l'idée à la production.
• S'adapter rapidement aux nouvelles technologies, multitâcher et apprendre rapidement.
• Collaborer avec des équipes interfonctionnelles pour définir, concevoir et lancer de nouvelles fonctionnalités et expériences produits.
• Exécuter des demandes de produits à délai d'exécution rapide pour des clients de grande valeur.

Qualifications préférées

• Plus de 5 ans d'expérience en ingénierie après l'obtention du diplôme.
• Maîtrise de Python, Node, React, Next.js et MongoDB.
• Solide connaissance des algorithmes, des structures de données et de la programmation orientée objet.
• Expérience dans la mise à l'échelle des produits dans des startups à croissance hyper rapide.
• Passion pour les technologies de l'IA.
• Excellentes compétences en communication pour prospérer dans une culture axée sur l'écriture.
• Excellentes compétences en résolution de problèmes et un esprit d'équipe.

Les compétences supplémentaires précieuses comprennent :

• Maîtrise des meilleures pratiques en ingénierie logicielle.
• Expérience avec les plateformes d'IA, les modèles génératifs et les LLM.
• Expertise dans la construction d'infrastructures ML et de solutions alimentées par l'IA.
• Expérience dans le lancement de nouveaux produits, du concept à la réalité.

Rémunération et avantages

Scale offre des packages de rémunération compétitifs, incluant un salaire de base, des actions et des avantages complets. Les fourchettes de salaires dépendent du lieu de travail et d'autres facteurs liés à l'emploi. Notre package d'avantages comprend une couverture complète en matière de santé, dentaire et visuelle, des avantages pour la retraite, une allocation pour l'apprentissage et le développement, et des congés généreux. Ce rôle peut également être éligible à des avantages supplémentaires tels qu'une allocation de transport.

Détails de transparence salariale pour les postes à temps plein à San Francisco, New York et Seattle :