Мы в Perficient рады объявить о вакансии ведущего инженера данных AWS. Несмотря на то, что наша главная офисная база находится в Сент-Луисе, штат Миссури, эта должность является удаленной и открыта для кандидатов по всем Соединенным Штатам, работающих в восточном временном поясе (ET).
Будучи мотивированным ведущим инженером данных AWS, вы будете играть ключевую роль в создании эффективных и масштабируемых данных пайплайнов с использованием AWS. Ваш опыт работы с ETL-сервисами AWS позволит вам проектировать, разрабатывать и управлять решениями для интеграции больших объемов данных, одновременно обеспечивая высокое качество данных, безопасность и производительность.
- Проектирование и внедрение надежных данных пайплайнов с использованием сервисов AWS таких как Glue, Lambda, Step Functions и Kinesis.
- Руководство и наставничество команды инженеров ETL, повышение их квалификации и успешное выполнение проектов по интеграции данных.
- Оптимизация существующих данных пайплайнов для повышения производительности, масштабируемости и экономической эффективности.
- Разработка подробной документации для обеспечения прозрачности и содействия передаче знаний.
- Внедрение тщательных проверок качества данных и мониторинг процессов для поддержания целостности данных на протяжении всего ETL процесса.
- Сотрудничество с аналитиками данных, учеными данных и заинтересованными бизнес-сторонами для эффективного удовлетворения требований ETL.
- Обеспечение безопасного доступа к данным путем управления политиками AWS Identity and Access Management (IAM) и использованием Infrastructure as Code (IaC) с инструментами вроде Terraform.
- Оставаться в курсе последних разработок в области сервисов данных AWS и лучших практик ETL для непрерывного улучшения наших процессов.
- Решение и устранение сложных проблем в данных пайплайнах для обеспечения бесперебойной работы с данными.
- Не менее 3 лет опыта проектирования и внедрения данных пайплайнов на базе AWS.
- Доказанный опыт работы с ETL-сервисами AWS такими как Glue, Lambda, Step Functions и Kinesis.
- Твердое понимание концепций хранилищ данных и моделирования данных.
- Владение SQL, Python или Bash для манипуляций с данными и автоматизации задач.
- Богатый опыт в методологиях обеспечения качества данных.
- Отличные коммуникативные способности, умение работать в команде, лидерские качества и способности к решению проблем.
- С