QA Engineer AI Platforms

¿Te apasionan las tecnologías de vanguardia y los sistemas de IA? Emergence está buscando un ingeniero de aseguramiento de calidad (QA) hábil para unirse a nuestro equipo y garantizar los más altos estándares en nuestras plataformas de IA. ¡Sumérgete en los conceptos de PLN, prueba de modelos de lenguaje grande (LLM) y marcos de automatización con nosotros!

• Experiencia en PLN y LLM: Comprensión profunda de conceptos de procesamiento de lenguaje natural (PLN), arquitecturas de LLM y métricas de evaluación.
• Habilidades de Programación: Fuertes habilidades de programación en Python y herramientas de automatización de pruebas. Capacidad comprobada para escribir scripts de prueba eficientes, marcos de automatización y realizar análisis de datos.
• Estrategias de Pruebas de LLM: Experiencia extensa en diseñar y ejecutar estrategias de pruebas completas para LLM. Capacidad para diseñar e implementar marcos de automatización personalizados para Modelos de Lenguaje Grande.
• Integración CI/CD: Integrar pruebas de automatización de LLM en pipelines de CI/CD.
• Metodologías de Prueba de Software: Comprensión profunda de las metodologías de prueba de software y experiencia práctica con herramientas de gestión de defectos. Familiaridad con sistemas de control de versiones y pipelines de CI/CD.
• Herramientas específicas de LLM: Experiencia práctica con herramientas de prueba específicas de LLM, herramientas de comparación de texto y bibliotecas de visualización de datos tales como Weights and Biases, DeepEval, etc.
• Privacidad de Datos: Conocimiento de las regulaciones de privacidad de datos y experiencia en diseñar pruebas para detectar y mitigar sesgos en LLMs.

• Título universitario en ciencias de la computación o campo relacionado.
• Un mínimo de 3-5 años de experiencia en probar LLMs y sistemas basados en LLM.
• Amplio conocimiento de LLMs, VLMs o MLLMs.
• Competencia en Python.
• Experiencia con Git, CI/CD.
• Familiaridad con despliegue en la nube (GCP o AWS), y Docker.
• Fuertes habilidades de comunicación.

• Último viernes de cada mes Tiempo libre pagado para todos.
• Igualación de 401(k).
• Seguro dental.
• Horario flexible.
• Cuenta de gastos flexibles.
• Seguro de salud.
• Cuenta de ahorros para la salud.
• Seguro de vida.
• Tiempo libre pagado ilimitado.
• Licencia parental.
• Seguro de visión.

Emergence está comprometido con la diversidad y la inclusión en el lugar de trabajo. Prohibimos la discriminación y el acoso basados en raza, color, sexo, religión, orientación sexual, origen nacional, discapacidad, información genética, embarazo o cualquier otra característica protegida. Somos un empleador que ofrece igualdad de oportunidades y tomamos decisiones de contratación basadas únicamente en las calificaciones, el mérito y las necesidades del negocio.

¡Aplica ahora para unirte a Emergence como Ingeniero de QA para Plataformas de IA y contribuye a tecnologías de IA innovadoras!