Senior Software Engineer, GenAI Safety & Evaluation

Про роботу

У сучасному техно-орієнтованому світі штучний інтелект (ШІ) революціонізує програмне забезпечення. ШІ експоненційно підвищує інтелект людини, спонукаючи провідні технічні компанії розробляти великомасштабні моделі LLM та підприємства інтегрувати ШІ у свої продукти. Для забезпечення безпеки, відповідності та корисності цих моделей важливими є високоякісні дані, створені людиною, та їх оцінка. Від запуску ChatGPT Scale є лідером у забезпеченні даних для посттренувального доробку, тонкого налаштування та узгодження з людськими перевагами (RLHF) через наш Генеративний Двигун Даних ШІ, формуючи майбутнє взаємодії людини та ШІ.

Якщо клієнти постійно вдосконалюють свої моделі, надійні оцінки ефективності та виявлення слабких місць стають критично важливими. Експерти Scale проводять ці оцінки, направляючи розробників моделей на оптимізацію їх технічних інвестицій.

Команда GenAI Safety & Evaluation у Scale створює високоякісну платформу для оцінки моделей, яка спрямована на клієнтів. Ця платформа спрощує запуск нових робочих процесів оцінки, надає детальну інформацію про результати на рівні тест-кейсів та впливає на дорожню карту розробки моделей. Приєднавшись до нашої команди, ви формуватимете стандартні практики оцінки в індустрії, впливаючи на мільярди людей у всьому світі. Ви також створюватимете впливові рішення з нуля як частина нашої новаторської команди продукту.

Співпрацюючи з Лабораторією безпеки, оцінок та узгодження Scale (SEAL) та експертною командою червоного (red) тімінгу, ви сприятимете безпеці ШІ через ретельне тестування моделей, схвалене провідними установами.

Ключові обов'язки

• Створювати функціонал для клієнтів, який демонструє інженерну досконалість.
• Працювати з бекендом, фронтендом та взаємодіями моделей маштабного навчання.
• Спостерігати за всім життєвим циклом продукту — від ідеї до виробництва.
• Швидко адаптуватися до нових технологій, одночасно виконувати кілька завдань та швидко навчатися.
• Співпрацювати з міжфункціональними командами для визначення, проектування та запуску нових функцій та експириенсів продукту.
• Виконувати термінові запити на продукцію для високовартісних клієнтів.

Бажані кваліфікації

• Понад 5 років досвіду в інженерії після закінчення навчання.
• Володіння Python, Node, React, Next.js та MongoDB.
• Сильні знання алгоритмів, структур даних та об'єктно-орієнтованого програмування.
• Досвід масштабування продуктів у стартапах швидкого зростання.
• Ентузіазм до технологій ШІ.
• Сильні комунікаційні навички для успішної роботи в культурі письмової комунікації.
• Відмінні навички розв’язання проблем та командно-орієнтоване мислення.

Додаткові корисні навички включають:

• Володіння найкращими практиками програм