Dołącz do naszego zespołu jako Tech Lead Inżynier Danych w branży spożywczej i napojów!

O firmie: W Coherent Solutions z dumą jesteśmy liderami na światowym rynku sektora spożywczego i napojów, z operacjami na pięciu kontynentach i rocznymi sprzedażami przekraczającymi 7 miliardów dolarów. Współpracujemy z czołowymi detalistami, restauracjami i dystrybutorami, dostarczając doskonałości na każdym poziomie.

Wymagana wiedza techniczna:

• Azure Databricks
• PySpark
• SQL
• Azure Data Factory
• Azure Data Lake
• Azure SQL DW
• Azure SQL
• Python

Twoja rola:

Jako Tech Lead Inżynier Danych, twoje obowiązki będą obejmować:

• Opracowywanie szczegółowego planu technicznego dla migracji, obejmującego pobieranie danych, ich transformację, przechowywanie i kontrolę dostępu przy użyciu Azure Data Factory i Data Lake.
• Projektowanie i wdrażanie skalowalnych potoków danych z wykorzystaniem Azure Databricks, aby ułatwić płynny przepływ danych z wielu źródeł.
• Tworzenie skalowalnych, wielokrotnego użytku frameworków do pobierania danych.
• Zapewnianie integralności i jakości danych na całej długości potoku danych dzięki solidnym mechanizmom walidacji i oczyszczania.
• Wykorzystanie technologii opartych na zdarzeniach/streamingowych do pobierania i przetwarzania danych.
• Świadczenie wsparcia technicznego i rozwiązywanie wyzwań technicznych w trakcie i po migracji.
• Bycie na bieżąco z postępami w chmurze obliczeniowej, inżynierii danych i analizie danych, zalecanie najlepszych praktyk i standardów branżowych.

Wymagania dotyczące pracy:

• 8 do 10 lat doświadczenia w IT, szczególnie w Azure Databricks i PySpark.
• Znajomość programowania SQL i Pythona dostosowanego do inżynierii danych.
• Udowodniona zdolność zarządzania profilowaniem danych, katalogowaniem i mapowaniem w celu tworzenia technicznych przepływów danych.
• Doświadczenie z narzędziami do wizualizacji danych.
• Umiejętności lidera technicznego umożliwiające skuteczne prowadzenie zespołów.
• Silne umiejętności rozwiązywania problemów i ekspertyza w przekładaniu wymagań biznesowych na praktyczne rozwiązania z zakresu nauki o danych.
• Znakomite umiejętności komunikacyjne do interakcji zarówno z osobami technicznymi, jak i nietechnicznymi.
• Poziom języka angielskiego - średnio zaawansowany (w mowie i piśmie).

Pożądane umiejętności:

• Microsoft Certified: Azure Data Engineer Associate.
• Doświadczenie w przygotowywaniu danych do projektów z zakresu Data Science i uczenia maszynowego.
• Znajomość Jupytera lub notatników Databricks do programowania w Pythonie.