Senior Data Engineer, GenAI

MongoDB, піонер у сфері програмного забезпечення для управління базами даних, переживає захоплюючий період зростання. Оскільки ринок програмного забезпечення для баз даних прогнозується зросте з 82 мільярдів доларів в 2023 році до приблизно 137 мільярдів доларів у 2027 році, MongoDB продовжує вести та іновувати. Будучи першим провайдером баз даних, що вийшов на публічне розміщення акцій більш ніж за два десятиліття, ми пропонуємо неперевершену можливість для талановитих спеціалістів приєднатися до компанії, яка формує майбутнє технологій.

Наша команда інженерів з обробки даних знаходиться в самому серці операцій MongoDB, підвищуючи ефективність компанії завдяки міцним ETL-пайплайнам. Ці пайплайни підтримують нашу внутрішню платформу даних, сприяючи потужному аналізу та внесенню вкладу в наші передові фреймворки генеративного штучного інтелекту. Ця роль є вирішальною в допомозі MongoDB використовувати ШІ для перетворення величезних наборів даних на доступну, дієву інформацію.

На посаді старшого інженера з даних, GenAI, ви будете:

• Створювати та керувати ETL-пайплайнами, використовуючи Python та Spark.
• Проектувати та впроваджувати ці пайплайни в різних архітектурах, таких як системи на основі файлів та потокові системи.
• Стратегічно оптимізувати інструменти ШІ, зосереджуючись на методах розбиття даних та вилучення для застосунків на основі RAG.
• Постійно оновлювати та інтегрувати останні тренди та інструменти ШІ у платформи MongoDB.
• Приймати ключові архітектурні рішення щодо зберігання величезних наборів даних у форматах, таких як Parquet та JSON, та використовувати різні типи таблиць, як Iceberg та Hive.
• Співпрацювати з міжфункціональними командами для забезпечення безпеки даних, відповідності та масштабованості.

Ми шука