Senior Research Scientist, Multimodal Foundation Models and Robotics

Ви — досвідчений науковий співробітник з акцентом на мультимодальні фундаційні моделі та робототехніку? NVIDIA активно шукає талановиту особу для приєднання до групи Generalist Embodied Agent Research (GEAR). Наша місія полягає у розробці універсальних агентів, здатних оволодівати складними навичками як у віртуальних, так і у фізичних умовах.

У складі інноваційної та співпрацюючої дослідницької команди, ви зосередитесь на створенні фундаційних моделей та систем для гуманоїдних роботів. Наша команда раніше працювала над високоефективними проєктами, такими як Eureka, VIMA, Voyager, MineDojo, MimicPlay, Prismer, та нашим останнім досягненням – Проектом GR00T.

Ваша робота матиме значний вплив на наші новаторські дослідницькі проєкти та дорожні карти розробки продуктів.

• Розробка та впровадження передових алгоритмів та моделей штучного інтелекту для гуманоїдних роботів та агентів.
• Розробка методів масштабної підготовки та інференції штучного інтелекту для фундаційних моделей.
• Оптимізація та розгортання моделей штучного інтелекту у фізичних симуляціях та на роботизованому обладнанні.
• Співпраця з командами по всій NVIDIA для перетворення досліджень у продукти та послуги.

Загальні вимоги

• Доктор наук у галузі комп'ютерних наук / техніки, електротехніки або еквівалентний досвід досліджень.
• 5 років релевантного досвіду роботи або досліджень у хоча б одній з наступних областей:
  • Мультимодальні фундаційні моделі
  • Досвід у підготовці тренувальних моделей та публікації у галузі великих мовних моделей (LLMs), великих візуально-мовних моделей, відео-генеративних моделей, дифузійних алгоритмів або трансформаторів дій.
• Володіння швидким прототипуванням та фреймворками тренування моделей, такими як PyTorch, Jax або TensorFlow. Обов'язкове знання Python; C++ і CUDA є плюсом.

Вимоги до робототехніки

• Досвід та публікації у галузі навчання роботів, таких як підкріплювальне навчання, навчання за прикладом та методи класичного управління.
• Володіння мовами Python, C++, ROS та фреймворками машинного навчання, такими як PyTorch.
• Глибоке розуміння кінематики, динаміки та датчиків роботів.
• Здатність безпечно працювати з роботизованим обладнанням, лабораторним устаткуванням та інструментами.
• Знання методів управління, включаючи PID, предиктивне управління моделлю та управління всім тілом.
• Досвід роботи з фреймворками фізичної симуляції, такими як MuJoCo та Isaac Sim.
• Практичний досвід з дизайну та будівництва роботизованого обладнання.

NVIDIA постійно визнається однією з найзатребуваніших технологічних компаній у світі. Наша орієнтована на майбутнє та динамічна команда є однією з найпродуктивніших у світі. Це ваш шанс долучитися до новаторських зусиль у розробці універсальних роботів та