Azure Databricks Engineer

Poziom Doświadczenia: 5-7 lat

Firma: PradeepIT Consulting Services Pvt Ltd

PradeepIT Consulting Services Pvt Ltd poszukuje utalentowanego i doświadczonego Starszego Inżyniera Danych, który dołączy do naszego innowacyjnego zespołu. Sukces kandydata będzie oparty na solidnych umiejętnościach w dziedzinie inżynierii danych, w tym na ekspertyzie w zakresie Azure Databricks, Pyspark, Architektury Medallion oraz Data Lakes.

• Projektowanie, rozwijanie i optymalizacja linii przetwarzania danych przy użyciu Azure Databricks i Pyspark.
• Wdrażanie i utrzymywanie Architektury Medallion w celu usprawnienia przepływów przetwarzania danych.
• Zarządzanie i organizowanie dużych zbiorów danych w Data Lakes, zapewniając jakość i integralność danych.
• Pisanie złożonych zapytań SQL w celu ekstrakcji, przekształcania i ładowania danych z różnych źródeł.
• Współpraca z naukowcami zajmującymi się danymi, analitykami i innymi interesariuszami w celu zrozumienia potrzeb danych i dostarczania efektywnych rozwiązań danych.
• Monitorowanie i rozwiązywanie problemów związanych z wydajnością linii przetwarzania danych oraz ich naprawa w razie potrzeby.
• Śledzenie najnowszych osiągnięć w dziedzinie inżynierii danych i proponowanie innowacyjnych rozwiązań w celu poprawy procesów danych.

• 5-7 lat praktycznego doświadczenia w inżynierii danych lub pokrewnej dziedzinie.
• Biegłość w Azure Databricks i Pyspark.
• Silne zrozumienie Architektury Medallion i jej wdrożenia.
• Doświadczenie w pracy z Data Lakes i zarządzaniu dużymi zbiorami danych.
• Zaawansowane umiejętności w zakresie SQL oraz umiejętność pisania i optymalizacji złożonych zapytań.
• Znajomość usług Azure oraz rozwiązań danych w chmurze.
• Silne umiejętności rozwiązywania problemów i dbałość o szczegóły.
• Doskonałe umiejętności komunikacji i współpracy.

W PradeepIT Consulting Services Pvt Ltd jesteśmy zaangażowani w wykorzystywanie mocy danych do napędzania innowacyjnych rozwiązań. Jeśli masz pasję do pracy z dużymi zestawami danych i lubisz rozwijać zaawansowane rozwiązania danych, zachęcamy do aplikowania na to ekscytujące stanowisko.

Zainteresowani kandydaci, prosimy o przesyłanie aplikacji z szczegółowym CV. Czekamy na nowego członka zespołu!