#13721 - Data Engineer - AI Model Testing
- Data Engineer
- Miami
- 06/12/2024
- -
Qualitest, провідна у світі компанія з інженерії якості на базі штучного інтелекту, шукає кваліфікованого Інженера з даних - Тестування моделей ШІ для підсилення нашої команди в Маямі, штат Флорида, США. Якщо ви прагнете працювати поруч зі світовими лідерами думок та щодня інновувати, ми чекаємо на вас!
Підготовка даних: Управління збором, очищенням та попередньою обробкою великих наборів даних для навчання та тестування моделей ШІ, з акцентом на якість і релевантність даних.
Розробка фреймворку для тестування моделей: Створення та підтримка передових фреймворків для перевірки продуктивності та точності моделей ШІ.
Тестування продуктивності: Виконання строгих випробувань для оцінки метрик продуктивності моделей, включаючи точність, відновлення, визначеність та F1-оцінку для відповідності встановленим стандартам.
Тестування потоків даних: Гарантування цілісності та ефективності потоків даних, які живлять моделі ШІ, виявлення проблем у витоку даних, затримках та трансформаціях.
Перевірка моделей: Валідація моделей ШІ за допомогою нових або небачених даних для забезпечення стійкості та запобігання перенавчанню.
Моніторинг зсуву моделей: Постійне спостереження за активними моделями для виявлення та виправлення будь-якого зсуву моделей, підтвердження актуальності прогнозів.
Співпраця з дата-вченими: Тісне співробітництво з дата-вченими для розуміння поведінки моделей та вдосконалення тестування на основі специфіки моделей та контексту використання.
Документація: Ведення докладних записів про протоколи тестування, результати та вдосконалення, застосовані до моделей на основі відгуків.
Оцінка інструментів та технологій: Дослідження і впровадження передових і