Опис:
Rackspace шукає досвідченого Data Engineer для приєднання до нашої команди в Сіднеї. Ідеальний кандидат буде відзначатися у створенні та підтримці фреймворків для обробки даних, таких як DBT, SQLMesh та Coalesce у середовищах AWS EMR/Glue. Ця роль є ключовою для практичної розробки та оптимізації каналів даних, щоб забезпечити їх відповідність стратегії даних нашого банку та високу ефективність.
- Досвід роботи з сервісами даних AWS, включаючи AWS EMR, Glue, S3, Redshift та інші суміжні технології.
- Доведений досвід у створенні розвинених фреймворків для обробки даних на AWS EMR/Glue, Apache Spark та інших технологіях AWS Data services.
- Глибоке розуміння написання ефективного, надійного та підтримуваного коду для керування робочими процесами даних.
- Міцні основи програмної інженерії, включаючи Об'єктно-орієнтоване проектування (OOD) та шаблони проектування.
- Оптимізація обробки даних для продуктивності та масштабованості.
- Співпраця з архітекторами даних для впровадження найкращих практик та покращення можливостей фреймворків даних.
- Допомога у вирішенні технічних проблем та надання підтримки команді Data Engineering.
- Ступінь бакалавра в галузі комп'ютерних наук, інженерії або суміжні технічні спеціальності.
- 3+ роки практичного досвіду з сервісами AWS, зокрема EMR та Glue.
- Володіння створенням фреймворків для обробки даних, таких як DBT, SQLMesh або Coalesce.
- Глибоке розуміння SQL, моделювання даних та процесів ETL.
- Досвід роботи із системами контролю версій та CI/CD конвеєрами.
- Знайомство з додатковими сервісами AWS та інструментами аналітики даних.
Додаткова інформація:
Назва компанії: Rackspace
Назва посади: AWS Data Engineer - AU
Місцезнаходження: Сідней