Senior Software Engineer, GenAI Safety & Evaluation

О работе

В современном технологичном мире ИИ революционизирует программное обеспечение. ИИ экспоненциально усиливает человеческий интеллект, побуждая ведущие технологические компании разрабатывать масштабируемые LLM и предприятия интегрировать ИИ в свои продукты. Чтобы гарантировать безопасность, соответствие и полезность этих моделей, необходимы высококачественные данные и оценка, созданные людьми. С момента запуска ChatGPT, Scale является лидером в предоставлении данных для дообучения, тонкой настройки и выстраивания предпочтений людей (RLHF) через наш генеративный ИИ движок данных, формируя будущее взаимодействия человека и ИИ.

По мере того как клиенты продолжают дорабатывать свои модели, становится критически важной достоверная оценка производительности и выявление слабых мест. Эксперты Scale проводят эти оценки, направляя разработчиков моделей на оптимизацию их технических вложений.

Команда GenAI Safety & Evaluation в Scale создает платформу оценки моделей для клиентов премиум-класса. Эта платформа упрощает запуск новых рабочих процессов оценки, предоставляет детализированные результаты на уровне тестовых случаев и влияет на дорожные карты развития моделей. Присоединившись к нашей команде, вы сформируете отраслевые стандарты оценки, влияя на миллиарды людей по всему миру. Также вы будете разрабатывать значимые решения с нуля в составе нашей инновационной команды по продуктам.

Сотрудничая с Лабораторией безопасности, оценки и выравнивания Scale (SEAL) и экспертной командой, вы будете способствовать безопасности ИИ через строгие тестирования моделей, поддержанные ведущими учреждениями.

• Поставка функций, готовых для клиентов, демонстрирующих инженерное превосходство.
• Работа с серверной частью, фронтендом и взаимодействиями с моделями машинного обучения.
• Контроль за всем жизненным циклом продукта — от идеи до запуска в производство.
• Быстрая адаптация к новым технологиям, многозадачность и быстрое обучение.
• Сотрудничество с кросс-функциональными командами для определения, проектирования и запуска новых функций и опыта продукта.
• Осуществление быстрого выполнения запросов на продукты для высокоценных клиентов.

• 5+ лет опыта работы в инженерии после окончания учебы.
• Знание Python, Node, React, Next.js и MongoDB.
• Хорошее знание алгоритмов, структур данных и объектно-ориентированного программирования.
• Опыт масштабирования продуктов в условиях стартапов с высоким ростом.
• Увлечение технологиями ИИ.
• Сильные коммуникативные навыки для успешной работы в письменнокультурной среде.
• Отличные навыки решения проблем и командный склад ума.

Дополнительные полезные навыки включают:

• Знание передовых практик инженерии программного обеспечения.
• Опыт работы с ИИ-платформами, генеративными моделями и LLM.
• Экспертиза в создании инфраструктуры ML и решений, поддерживаемых ИИ.
• Опыт запуска новых продуктов от концепции до реальности.

Scale предлагает конкурентные компенсационные пакеты, включая базовую зарплату, акции и комплексные льготы. Диапазоны заработной платы зависят от места работы и других факторов, связанных с работой. Наш пакет льгот включает всеобъемлющее медицинское, стоматологическое и зрительное страхование, пенсионные льготы, пособие на обучение и развитие, а также щедрый оплачиваемый отпуск. Эта роль также может предоставлять дополнительные льготы, такие как пособие на проезд.

Детали прозрачности оплаты для штатных должностей в Сан-Франциско, Нью-Йорке и Сиэтле:

Диапазон заработной платы: $160,000—$225,000 USD

В Scale мы продвигаем инновации в области ИИ во всех отраслях