AWS- Data Engineer- AU (Sydney)

Описание:

Rackspace ищет опытного инженера по обработке данных для присоединения к нашей команде в Сиднее. Идеальный кандидат будет преуспевать в разработке и поддержке фреймворков для обработки данных, таких как DBT, SQLMesh и Coalesce в средах AWS EMR/Glue. Эта роль крайне важна для практической разработки и оптимизации конвейеров данных, обеспечивая их соответствие стратегии данных нашего банка и высокую эффективность.

Основные обязанности:

• Опыт работы с сервисами данных AWS, включая AWS EMR, Glue, S3, Redshift и другие связанные технологии.
• Доказанный опыт разработки продвинутых фреймворков для обработки данных на AWS EMR/Glue, Apache Spark и других технологиях AWS Data services.
• Глубокое понимание написания эффективного, надежного и поддерживаемого кода для управления рабочими процессами данных.
• Твердая основа в программной инженерии, включая объектно-ориентированное проектирование (OOD) и шаблоны проектирования.
• Оптимизация конвейеров обработки данных для повышения производительности и масштабируемости.
• Сотрудничество с архитекторами данных для внедрения передовых практик и улучшения возможностей фреймворков данных.
• Помощь в разрешении технических проблем и предоставление поддержки команде инженеров по обработке данных.

Минимальные квалификации:

• Степень бакалавра в области компьютерных наук, инженерии или смежной технической области.
• 3+ года практического опыта работы с сервисами AWS, особенно EMR и Glue.
• Опыт работы с фреймворками для обработки данных, такими как DBT, SQLMesh или Coalesce.
• Глубокое понимание SQL, моделирования данных и процессов ETL.

Предпочтительные квалификации:

• Опыт работы с системами контроля версий и конвейерами CI/CD.
• Знакомство с дополнительными сервисами AWS и инструментами аналитики данных.

Дополнительная информация:

Название компании: Rackspace

Название вакансии: AWS Data Engineer - AU

Местоположение: Сидней