Staff Engineer, Data Analytics Engineering ( 6+ yrs Apache ,Spark ,Python and PySpark )

W Western Digital nie tylko kształtujemy przyszłość technologii; realizujemy to, co kiedyś wydawało się niemożliwe. Nasze zaangażowanie w innowacje pozwala nam odgrywać kluczową rolę w napędzaniu głównych postępów – od tworzenia platform, które uczynią miasta inteligentniejszymi, po systemy, które uproścą łączność. Teraz poszukujemy utalentowanego Inżyniera Sztabowego, Inżynierii Analiz Danych, który dołączy do naszego zespołu.

Western Digital jest dynamiczną siłą w dziedzinie technologii, znanej z obszernego portfolio technologii, urządzeń do przechowywania danych i platform zarówno dla biznesu, jak i konsumentów. Przekraczając granice technologii, dostarczamy rozwiązania zorientowane na dane pod markami Western Digital®, G-Technology™, SanDisk® i WD®. W miarę naszego rozwoju rośnie nasze zapotrzebowanie na wysoko wykwalifikowanych i innowacyjnych członków zespołu.

Szukamy Inżyniera Sztabowego, Inżynierii Analiz Danych z mocnym doświadczeniem w ETL, Apache Spark i strumieniowaniu danych w czasie rzeczywistym. Do tej roli wymagane jest co najmniej 6 lat doświadczenia w tworzeniu zadań ETL za pomocą wiodących narzędzi ETL oraz udokumentowane osiągnięcia w przetwarzaniu danych na dużą skalę.

• Projektowanie, rozwijanie i optymalizacja aplikacji Apache Spark.
• Implementacja transformacji danych przy użyciu RDDs i Data Frames Spark.
• Rozwój i utrzymanie potoków Apache Kafka dla strumieniowania danych w czasie rzeczywistym.
• Znajomość Pythona, PySpark, Scali, NIFI i SQL/Procedure jest niezbędna.
• Znajomość systemów Unix/Linux OS, baz danych Postgres, Redshift/Snowflake oraz narzędzi CI/CD takich jak Jenkins, Docker, Kubernetes jest mile widziana.
• Tworzenie i harmonogramowanie zadań za pomocą Airflow, integracja potoków danych z narzędziami monitorującymi takimi jak Splunk i Grafana.

Idealny kandydat będzie posiadał tytuł licencjata z nauk komputerowych lub inżynierii, preferowany stopień magistra. Certyfikaty AWS dla programistów, wraz z wszelkimi certyfikatami w metodologiach cyklu życia oprogramowania (SDLC), będą dodatkowym atutem.

W Western Digital, tworzymy środowisko sprzyjające inkluzji, które zachęca do różnorodności i innowacji. Uważamy, że mieszanka różnych perspektyw prowadzi do lepszych wyników nie tylko dla naszego zespołu, ale również dla technologii, którą tworzymy. Jesteśmy zobowiązani do wsparcia wszystkich naszych pracowników poprzez różnorodne i inkluzywne miejsce pracy.

Jeśli posiadasz umiejętności i pasję do technologii, zapraszamy Cię do dołączenia do nas w tworzeniu rozwiązań, które mają wpływ na skalę globalną. Upewnij się, że Twoja aplikacja zawiera szczegółowe CV oraz wszelkie odpowiednie certyfikaty. W przypadku wniosków o zakwaterowanie podczas procesu rekrutacji, prosimy o kontakt pod adresem [email protected].

Bądź katalizatorem rozwiązań danych