Software Engineer- Data (Big data and Data Pipelines)- Delhi (preferred)/ Bangalore

O Findem

Findem jest jedyną platformą danych o talentach, która integruje dane 3D z AI, aby zrewolucjonizować Twój ekosystem talentów. Automatyzując i konsolidując sourcing, CRM i analitykę, nasza platforma dostarcza bezprecedensowe wglądy w rynek pracy i Twoją konkurencję. Napędzany danymi 3D, Findem dostarcza zautomatyzowane przepływy pracy w całym cyklu życiowym talentów, tworząc doskonałe doświadczenia talentów i budując ciągłe przepływy najlepszych, zróżnicowanych kandydatów. Dowiedz się więcej na www.findem.ai.

Stanowisko: Inżynier Big Data

Lokalizacja: Delhi (preferowane) / Bangalore. Kandydaci muszą być z tych lokalizacji lub gotowi na przeprowadzkę do tych lokalizacji.

Tryb pracy: Hybrydowy - 3 dni w biurze

Poziom doświadczenia

3 - 7 lat

Rola i obowiązki

• Rozwijanie i zarządzanie potokami danych, rozwiązaniami do przetwarzania dużych zbiorów danych oraz infrastrukturą jeziora danych za pomocą różnorodnych technologii Big Data i ETL.
• Składanie i przetwarzanie dużych, złożonych zestawów danych w celu spełnienia wymagań biznesowych.
• Przeprowadzanie ETL z różnych źródeł takich jak MongoDB, S3, Kafka i przetwarzanie za pomocą SQL i technologii Big Data.
• Tworzenie narzędzi analitycznych do uzyskiwania użytecznych wglądów w akwizycję klientów, efektywność operacyjną i inne kluczowe wskaźniki.
• Tworzenie interaktywnych i samoobsługowych narzędzi do zapytań ad-hoc na potrzeby analizy.
• Budowanie modeli danych i schematów dla wydajności, skalowalności i wymagań funkcjonalnych.
• Ustalanie procesów dla transformacji danych, metadanych, zależności i zarządzania przepływem pracy.
• Badanie, eksperymentowanie i prototypowanie nowych narzędzi/technologii dla udanej implementacji.

Kluczowe umiejętności

• Mocna biegłość w Python/Scala.
• Doświadczenie z technologiami Big Data takimi jak Spark, Hadoop, Athena/Presto, Redshift, Kafka.
• Znajomość formatów plików takich jak Parquet, JSON, Avro, ORC.
• Doświadczenie z narzędziami do zarządzania przepływem pracy takimi jak Airflow.
• Znajomość przetwarzania wsadowego, strumieniowego i kolejek wiadomości.
• Doświadczenie z narzędziami do wizualizacji, takimi jak Redash, Tableau, Kibana.
• Silne umiejętności rozwiązywania problemów.

Dodatkowe umiejętności

• Znajomość baz danych NoSQL takich jak MongoDB.
• Doświadczenie z platformami chmurowymi takimi jak AWS, GCP.
• Znajomość architektury mikroserwisów.
• Znajomość technik uczenia maszynowego.

To stanowisko jest pełnoetatowe i obejmuje kompleksowe korzyści. Nasza globalna centrala znajduje się w rejonie zatoki San Francisco, a nasza indyjska siedziba główna znajduje się w Bengaluru.

Równość szans

Jako zaangażowany pracodawca zapew