Principal Developer - Data Integration Engineer - DevOps

Opis firmy

W Western Digital nie tylko przesuwamy granice technologii; ustanawiamy nowe standardy. Nasze zaangażowanie w innowacje napędza postępy na całym świecie, przekształcając niemożliwe w rzeczywistość. Jako rozwiązywacze problemów, nasza technologia historycznie umożliwiła monumentalne osiągnięcia, takie jak lądowanie na Księżycu. Dzisiaj odgrywamy kluczową rolę w napędzaniu technologii za kulisami platform do gier, inteligentnych miast, pojazdów połączonych oraz centrów danych niektórych z wiodących na świecie korporacji.

Nasze solidne portfolio — obejmujące znane marki takie jak Western Digital®, G-Technology™, SanDisk® oraz WD® — oferuje najnowocześniejsze rozwiązania oparte na danych zarówno dla firm, jak i konsumentów. Niezależnie od tego, czy to maraton oglądania ulubionych seriali, zakupy online, czy zapisywanie cennych chwil na karcie pamięci flash, Western Digital jest niewidocznym filarem wspierającym te doświadczenia.

Wyrusz w podróż z nami w Western Digital, gdzie Twoje unikalne umiejętności przyczynią się do jaśniejszej, mądrzejszej przyszłości. Razem, bądźmy następną wielką rzeczą w danych.

Opis stanowiska

Główny Programista - Inżynier Integracji Danych - DevOps

Podstawowe obowiązki i odpowiedzialności:

• Tworzenie i wdrażanie skalowalnych potoków integracji danych za pomocą najnowocześniejszych narzędzi chmurowych, zgodnie z zasadami projektowania Western Digital.
• Rozwiązywanie problemów i poprawa wydajności istniejących potoków za pomocą BASH, Python, Java.
• Tworzenie solidnych rozwiązań danych na platformie AWS EMR za pomocą Java/Spark/Scala, orkiestrowane za pomocą AirFlow.
• Optymalizacja projektu tabel danych dla szybkiego ładowania i efektywnego wyszukiwania.
• Udoskonalanie procedur SQL i debugowanie problemów w bazach danych Postgres i Redshift.
• Implementacja przepływów pracy CI/CD za pomocą narzędzi takich jak Bitbucket, Jenkins, Ansible i więcej.

Wymagania

Wymagane wykształcenie: Licencjat z informatyki lub inżynierii jest niezbędny. Preferowane są kandydatury z tytułem magistra lub certyfikatem dewelopera AWS. Dodatkowe certyfikaty z metodologii cyklu życia oprogramowania są korzystne.

Wymagane doświadczenie: Co najmniej 8 lat doświadczenia w integracji/działaniu na danych z udokumentowaną ścieżką kariery w wykorzystaniu chmurowych lub lokalnych narzędzi ETL. Oczekuje się doświadczenia w zarządzaniu i wykonaniu Java UDFs w AWS EMR oraz znajomości platform Unix/Linux. Wysoko ceniona jest biegłość w Transact SQL i debugowaniu skryptów, jak również doświadczenie z bazami danych Postgres i/lub Redshift. Wiedza na temat zbiorów danych w produkcji półprzewodników jest korzystna, ale nie wymagana.

Informacje o wynagrodzeniu i korzyściach

Western Digital oferuje