Data Engineer, Python / AWS

Захватывающая возможность стать инженером данных на удаленке в Credera - Специалист по Python / AWS

Присоединяйтесь к Credera в качестве инженера данных, специализирующегося на Python и AWS, для работы удаленного подрядчика в Северной Америке. Этот 12-месячный контракт с потенциальным продлением предлагает почасовую ставку от 65 до 80 долларов США, в зависимости от вашего опыта.

В качестве инженера данных в Credera, вы будете сотрудничать с экспертами по предметным областям для разработки и уточнения онтологий данных, разработки надежных пайплайнов данных и интеграции Foundry с ключевыми внешними системами данных. Ваш опыт будет ключевым в предоставлении рекомендаций и поддержки по использованию инфраструктуры данных для создания инновационных рабочих процессов и выполнении анализа данных.

• Использование Generative AI в рамках данных AWS
• Бесперебойная интеграция новых источников данных с Foundry через Data Connection
• Разработка и поддержка двусторонних интеграций между Foundry и внешними базами данных
• Создание трансформационных пайплайнов для структурированных и неструктурированных наборов данных
• Использование PySpark / PySpark SQL для реализации преобразований данных и генерации новых наборов данных
• Создание структур поддержки для операционных пайплайнов
• Устранение критических проблем, таких как устаревание данных и вопросы качества
• Повышение производительности пайплайнов данных с фокусом на задержке и оптимизации ресурсов
• Проектирование онтологий данных в соответствии с бизнес-потребностями и существующими данными
• Предоставление инженерных решений по обработке данных во время процессов разработки приложений

• Подтвержденный опыт работы с инструментами Generative AI, такими как Amazon Bedrock, Amazon SageMaker, Amazon EC2, Amazon EC2 UltraClusters, AWS Trainium и AWS Inferentia
• Профессиональное владение Python
• Квалификация в SQL с глубоким пониманием запросов и моделирования данных
• Базовые знания PySpark и знакомство с распределенными вычислительными фреймворками, такими как Hadoop и Spark
• Понимание реляционных моделей и систем баз данных, таких как SAP и Salesforce
• Профессиональное использование Git для контроля версий и совместной работы
• Опыт работы с гибкими методологиями и быстрой адаптацией к отзывам пользователей
• Глубокие знания лучших практик качества данных

Если вас восхищ