AWS- Data Engineer - AU (Melbourne)

Opis Stanowiska

Dołącz do Rackspace jako Inżynier Danych AWS w Melbourne, gdzie odegrasz kluczową rolę w budowie i utrzymywaniu frameworków inżynierii danych, takich jak DBT, SQLMesh i Coalesce w środowiskach AWS EMR/Glue. Twoje działania będą miały kluczowe znaczenie dla rozwoju i optymalizacji przepływów danych zgodnie z naszą strategią danych banku.

Kluczowe Odpowiedzialności

• Wykorzystywanie usług danych AWS, w tym AWS EMR, Glue, S3 i Redshift.
• Budowa zaawansowanych frameworków inżynierii danych na AWS EMR/Glue i Apache Spark.
• Tworzenie wydajnych, niezawodnych i łatwych w utrzymaniu przepływów danych.
• Stosowanie zasad inżynierii oprogramowania, w tym projektowania zorientowanego obiektowo (OOD) i wzorców projektowych.
• Optymalizacja przepływów przetwarzania danych pod kątem wydajności i skalowalności.
• Współpraca z architektami danych w celu wdrażania najlepszych praktyk i ulepszania możliwości frameworku danych.
• Rozwiązywanie problemów technicznych i wspieranie zespołu inżynierii danych.

Minimalne Kwalifikacje

• Tytuł licencjata w dziedzinie informatyki, inżynierii lub pokrewnej dziedzinie technicznej.
• 3+ lat praktycznego doświadczenia z usługami AWS, w szczególności EMR i Glue.
• Biegłość w budowaniu frameworków inżynierii danych, takich jak DBT, SQLMesh lub Coalesce.
• Solidna znajomość SQL, modelowania danych i procesów ETL.

Preferowane Kwalifikacje

• Doświadczenie z systemami kontroli wersji i pipeline'ami CI/CD.
• Znajomość dodatkowych usług AWS i narzędzi analizy danych.

Firma: Rackspace

Stanowisko: Inżynier Danych AWS - Specjalista ds. Frameworków

Lokalizacja: Melbourne, Australia