Dołącz do naszego zespołu: Inżynier Danych Palantir | 9 do 15 lat doświadczenia | Capgemini w całych Indiach

Opis stanowiska

Poszukujemy doświadczonego Inżyniera Danych Palantir, który wzbogaci nasz zespół swoją wiedzą specjalistyczną w optymalizacji procesów danych i tworzeniu efektywnych architektur przetwarzania danych. Twoja rola będzie skupiać się na integracji zewnętrznych źródeł danych i systemów dziedzicznych z Foundry poprzez różne metody takie jak Agenci/Konektory Magritte oraz Połączenia Danych. Ponadto, będziesz przekształcać surowe pliki w cenne informacje, które stymulują wzrost biznesowy.

Kluczowe obowiązki:

• Skuteczne przetwarzanie danych za pomocą języków skryptowych takich jak Python, PySpark i SQL.
• Projektowanie i utrzymanie optymalnej architektury przetwarzania danych w Foundry.
• Tworzenie, optymalizacja i zarządzanie potokami danych za pomocą PySpark dla zadań po stronie back-end oraz TypeScript dla zadań front-end.
• Rozwój narzędzi analitycznych umożliwiających wykrywanie możliwości działania na podstawie kluczowych wskaźników wydajności biznesowej przy użyciu narzędzi Foundry takich jak Contour i Slate.
• Praca nad zarządzaniem harmonogramem i monitorowaniem zdrowia potoku danych w środowisku Palantir.
• Śledzenie wewnętrznych udoskonaleń procesów poprzez automatyzację ręcznych procesów i przeprojektowanie infrastruktury pod kątem skalowalności.

Podstawowe umiejętności

Kandydaci powinni posiadać ponad 5 lat solidnego doświadczenia na stanowisku Inżyniera Danych, uzupełnione o następujące umiejętności techniczne:

• Znajomość platform Hadoop, Spark i Kafka.
• Umiejętność obsługi zarówno relacyjnych baz danych SQL, jak i NoSQL, szczególnie Postgres oraz Cassandra/MongoDB.
• Doświadczenie w pracy z systemami przetwarzania strumieniowego takimi jak Storm i Spark-Streaming.
• Głębokie zrozumienie obiektowych i funkcyjnych języków skryptowych, w tym Python, Java, C++ i Scala.
• Silne umiejętności w zakresie SQL i doświadczenie w budowaniu oraz optymalizacji potoków danych dużych zbiorów, szczególnie z użyciem PySpark/Python.

Dodatkowe umiejętności

Idealny kandydat powinien również wykazywać następujące zdolności:

• Silne umiejętności analityczne i doświadczenie w pracy z dużymi zestawami danych.
• Doświadczenie w transformacji danych, projektowaniu struktur, metadanych, zależnościach oraz zarządzaniu obciążeniem pracy.
• Umiejętność efektywnej współpracy w różnorodnych zespołach w dynamicznym środowisku.

Dodatkowe informacje

Capgemini zaprasza do aplikowania na stanowisko Inżyniera Danych