Senior Data Engineer

Identyfikator oferty pracy: 10089743

Dołącz do Disney Entertainment & ESPN Technology! Tutaj tworzymy niezwykłe doświadczenia oglądania dla najbardziej cenionych historii świata i rewolucjonizujemy przyszłość mediów Disneya. Nasze innowacyjne zespoły koncentrują się na ewolucji naszych produktów streamingowych i cyfrowych, doskonaleniu globalnych systemów reklamowych i dystrybucyjnych oraz dostarczaniu niezrównanej rozrywki i treści sportowych.

• Budowanie przyszłości: Nasi technolodzy projektują i rozwijają infrastrukturę, która stanowi kręgosłup mediów Disneya, reklamy i działalności dystrybucyjnej.
• Zasięg i skalę: Rozwijamy oferty od Disney+ i Hulu po ABC News i ESPN+, zachwycając miliony konsumentów co minutę.
• Innowacja: Pionierskie produkty i metody kształtujące branżę, poprawiamy sposób, w jaki publiczność doświadcza sportu, wiadomości i rozrywki.

Jako Starszy Inżynier Danych w zespole Core Data & Services w organizacji DEET będziesz budować i nadzorować kluczowe potoki danych oraz zestawy danych, które wzmacniają zespoły inżynieryjne i analityczne. Twoje wysiłki umożliwią kluczowe decyzje biznesowe i zwiększą możliwości operacyjne dla największej usługi streamingowej.

• Utrzymywanie i rozwijanie potoków danych za pomocą Scala i Python/Spark, zapewniając wysoką dostępność zgodnie z SLA.
• Wzmacnianie funkcjonalności platformy Core Data i integracja z wewnętrznymi i zewnętrznymi API.
• Implementacja potoków danych wsadowych i strumieniowych z użyciem Scala, Databricks i Airflow.
• Współpraca nad architekturą Lakehouse i wspólnymi bibliotekami w celu ujednolicenia złożonej logiki biznesowej w całych potokach danych.
• Ścisła współpraca z menedżerami produktów i architektami w celu dalszego sukcesu platformy Core Data.
• Utrzymanie rygorystycznej dokumentacji wspierającej inicjatywy jakości danych i zarządzania nimi.

• Minimum 5 lat doświadczenia w inżynierii danych z rozległym rozwojem potoków danych.
• Znajomość Scala, Python, SQL oraz AWS lub innych usług chmurowych.
• Doświadczenie ze Spark i Airflow w środowiskach produkcyjnych.
• Licencjat w dziedzinie informatyki lub pokrewnym kierunku, lub równoważne doświadczenie.

• Doświadczenie z technologiami baz danych MPP lub chmurowymi.
• Znajomość tworzenia API, szczególnie z GraphQL.
• Znajomość modelowania danych i najlepszych praktyk w zakresie magazynowania danych.

Stanowisko jest zlokalizowane w Nowym Jorku, NY, z konkurencyjnym zakresem wynagrodzenia od 142,516 do 191,180 dolarów rocznie. Oferowane wynagrodzenie będzie zależne od Twoich umiejętności i