Lead Data Engineer, Databricks

Dołącz do naszego zespołu jako główny inżynier ds. danych w Srijan Technologies, Gurugram

Przegląd firmy

W Material wykorzystujemy wyzwania naszych klientów jako szansę na znaczący rozwój. Jako firma o zasięgu globalnym, współpracujemy z najbardziej ikonicznymi markami oraz innowacyjnymi firmami w celu projektowania i dostarczania przekonujących doświadczeń klientów poprzez głębokie spostrzeżenia ludzkie, innowacje w projektowaniu oraz dane, napędzane nowoczesną technologią. Nasze kompleksowe strategie poprawiają zaangażowanie i wzrost, efektywnie zmieniając relacje pomiędzy przedsiębiorstwami a ich klientami.

Srijan, będący częścią Material, jest świętowaną globalną firmą inżynieryjną cieszącą się szacunkiem za adresowanie skomplikowanych wyzwań technologicznych z głęboką wiedzą technologiczną obok wiodących partnerów technologicznych.

Omówienie stanowiska: Główny inżynier ds. danych, Databricks - Gurugram, Haryana, Indie

Jako doświadczony członek naszego zwinngo zespołu produktowego, przejdziesz na stanowisko głównego inżyniera ds. danych, koncentrując się na projektowaniu, budowie i utrzymywaniu skalowalnych i skutecznych potoków danych. Korzystając z narzędzi takich jak Databricks, SQL i Python, będziesz pracować ramię w ramię z naukowcami danych, deweloperami oprogramowania i analitykami. Twoim głównym celem będzie zapewnienie dostarczania wysokiej jakości rozwiązań danych, zgodnych z potrzebami biznesowymi. Bezpośrednio raportując do głównego inżyniera ds. danych, Twój wpływ będzie kluczowy dla naszych bieżących projektów.

Wymagane umiejętności i doświadczenie

Szukamy eksperta z:

• 6+ lat doświadczenia w technologiach Big Data, takich jak Apache Spark™, cloud native, jeziora danych i Databricks.
• Udowodnionym doświadczeniu w dostarczaniu solidnych rozwiązań ETL/ELT, w tym ekstrakcji danych, transformacji, czyszczeniu, integracji i zarządzaniu.
• Mocną biegłością w Pythonie do automatyzacji, pisania testów jednostkowych przy użyciu frameworków takich jak Nutter, Unittest, Pytest.
• Bogatą wiedzę na temat SQL, w tym skomplikowanych zapytań i strojenia wydajności.
• Doświadczenie z systemami kontroli wersji takimi jak Git, oraz znajomość procesów CI/CD.
• Zrozumienie modelowania danych, magazynowania danych i koncepcji integracji danych oraz najlepszych praktyk.

Dobrze mieć

Dodatkowe kwalifikacje obejmują:

• Doświadczenie w dziedzinie handlu detalicznego i zrozumienie takich jednostek jak POS, Produkty, Klient, Inwentarz.
• Doświadczenie z modelem Build-Operate-Transfer (BOT).
• Znajomość platformy chmurowej Azure oraz narzędzi wizualizacji danych, takich jak Power BI.
• Doświadczenie z przetwarzaniem danych niemal w czasie rzeczywistym i metod