QA Engineer AI Platforms

Êtes-vous passionné par les technologies de pointe et les systèmes d'IA ? Emergence recherche un QA Engineer qualifié pour rejoindre notre équipe et garantir les normes les plus élevées sur nos plateformes d'IA. Plongez avec nous dans les concepts de PNL, les tests de LLM et les frameworks d'automatisation !

Responsabilités :

• Expertise en PNL et LLM : Compréhension approfondie des concepts de PNL, des architectures LLM et des métriques d'évaluation.
• Compétences en programmation : Compétences solides en programmation en Python et outils d'automatisation des tests. Capacité prouvée à écrire des scripts de test efficaces, des frameworks d'automatisation et à effectuer des analyses de données.
• Stratégies de test LLM : Expérience approfondie dans la conception et l'exécution de stratégies de test LLM complètes. Capacité à concevoir et à mettre en œuvre des frameworks d'automatisation adaptés aux modèles de langage large.
• Intégration CI/CD : Intégrer les tests d'automatisation LLM dans les pipelines CI/CD.
• Méthodologies de test logiciel : Compréhension approfondie des méthodologies de test logiciel et expérience pratique avec les outils de gestion des défauts. Familiarité avec les systèmes de contrôle de version et les pipelines CI/CD.
• Outils spécifiques aux LLM : Expérience pratique avec des outils de test spécifiques aux LLM, des outils de comparaison de texte et des bibliothèques de visualisation de données telles que Weights and Biases, DeepEval etc.
• Confidentialité des données : Connaissance des réglementations sur la confidentialité des données et expérience dans la conception de tests pour détecter et atténuer les biais dans les LLM.

Qualifications :

• Un BS en informatique ou dans un domaine connexe.
• Un minimum de 3 à 5 ans d'expérience dans les tests de LLM et les systèmes basés sur LLM.
• Forte connaissance des LLM, VLM ou MLLM.
• Maîtrise du Python.
• Expérience avec Git, CI/CD.
• Familiarité avec le déploiement sur le cloud (GCP ou AWS) et Docker.
• Excellentes compétences en communication.

Avantages :

• Dernier vendredi du mois congé payé pour tout le monde.
• Correspondance 401(k).
• Assurance dentaire.
• Horaires flexibles.
• Compte de dépenses flexible.
• Assurance santé.
• Compte d'épargne santé.
• Assurance vie.
• Congés payés illimités.
• Congé parental.
• Assurance vision.

À propos d'Emergence

Emergence s'engage à promouvoir la diversité et l'inclusion sur le lieu de travail. Nous interdisons la discrimination et le harcèlement fondés sur la race, la couleur, le sexe, la religion, l'orientation sexuelle, l'origine nationale, le handicap, les informations génétiques, la grossesse ou toute autre caractéristique protégée. Nous sommes un employeur garantissant l'égalité des chances et prenons nos décisions d'embauche uniquement sur la base des qualifications, du mérite et des besoins de l'entreprise.

Postulez dès maintenant pour rejoindre Emergence en tant que QA Engineer pour les plateformes d'IA et contribuez aux technologies d'IA innovantes !