Senior Software Engineer, GenAI Safety & Evaluation

O pracy

W dzisiejszym świecie napędzanym technologią, AI rewolucjonizuje oprogramowanie. AI eksponencjalnie zwiększa ludzką inteligencję, co skłania czołowe firmy technologiczne do opracowywania dużych modeli LLM i integracji AI w swoich produktach. Aby zapewnić bezpieczeństwo, zgodność i użyteczność tych modeli, niezbędne są wysokiej jakości dane generowane przez ludzi i oceny. Od momentu uruchomienia ChatGPT, Scale jest liderem w dostarczaniu danych do post-training, fine-tuningu i human preference alignment (RLHF) poprzez nasz Generative AI Data Engine, kształtując przyszłość interakcji człowieka z AI.

W miarę jak klienci stale udoskonalają swoje modele, niezawodne oceny wyników i identyfikacja słabych punktów stają się kluczowe. Eksperci Scale przeprowadzają te oceny, pomagając twórcom modeli w optymalizacji ich inwestycji technicznych.

Zespół GenAI Safety & Evaluation w Scale tworzy platformę do oceny modeli na najwyższym poziomie dla klientów. Ta platforma upraszcza uruchamianie nowych workflowów oceny, dostarcza szczegółowych wglądów na poziomie wyników case'ów testowych i wpływa na plany rozwoju modeli. Dołączając do naszego zespołu, będziesz kształtować branżowe standardy oceny, wpływając na miliardy ludzi na całym świecie. Zbudujesz również znaczące rozwiązania od podstaw jako część naszego innowacyjnego zespołu produktowego.

Współpracując z Safety, Evaluations, and Alignment Lab (SEAL) oraz ekspertami red team w Scale, będziesz napędzać bezpieczeństwo AI poprzez rygorystyczne testy modeli poparte przez czołowe instytucje.

Kluczowe obowiązki

• Dostarczanie funkcji gotowych dla klientów, wykazując najwyższą jakość inżynierską.
• Praca z backendem, frontendem oraz interakcje z modelami ML.
• Zarządzanie całym cyklem życia produktu – od pomysłu po produkcję.
• Szybkie przyswajanie nowych technologii, wielozadaniowość i szybkie uczenie się.
• Współpraca z zespołami cross-funkcjonalnymi, aby definiować, projektować i wprowadzać nowe funkcje oraz doświadczenia produktowe.
• Realizowanie zgłoszeń produktów o szybkim czasie wdrożenia dla klientów o wysokiej wartości.

Preferowane kwalifikacje

• 5+ lat doświadczenia inżynierskiego po ukończeniu studiów.
• Biegłość w Pythonie, Node, React, Next.js i MongoDB.
• Silna znajomość algorytmów, struktur danych i programowania obiektowego.
• Doświadczenie w skalowaniu produktów w startupach o intensywnym wzroście.
• Zainteresowanie technologiami AI.
• Silne umiejętności komunikacyjne, aby odnosić sukcesy w kulturze opartej na pisaniu.
• Doskonałe umiejętności rozwiązywania problemów i nastawienie zespołowe.

Dodatkowe cenne umiejętności:

• Biegłość w najlepszych praktykach inżynierii oprogramowania.
• Doświadczenie w pracy z platformami AI, modelami generatywnymi i LLM.
• Ekspertyza w budowaniu infrastruktury ML i rozwiązań napędzanych AI.
• Doświadczenie w uruchamianiu nowych produktów od koncepcji do rzeczywistości.

Wynagrodzenie i świadczenia

Scale oferuje konkurencyjne pakiety wynagrodzeń, w tym pensję podstawową, udziały i kompleksowe świ