(USA) Data Engineer III

Oferta pracy: Inżynier Danych III w Walmart Global Tech

Poszukujemy wykwalifikowanego Inżyniera Danych do naszego rozwijającego się zespołu inżynierskiego w Finance Data Factory w Walmart Global Tech. Rola ta jest kluczowa w rozszerzaniu i optymalizacji naszej architektury danych i pipeline'ów danych, ulepszaniu przepływu danych oraz zapewnieniu bezproblemowego zbierania danych dla zespołów międzyfunkcyjnych.

Uwaga: Sponsorowanie zatrudnienia nie jest dostępne dla tej pozycji.

• Tworzenie i utrzymywanie optymalnej platformy danych i architektury pipeline'ów.
• Tworzenie dużych, złożonych zestawów danych, które spełniają funkcjonalne i niefunkcjonalne wymagania biznesowe.
• Identyfikowanie, projektowanie i wdrażanie wewnętrznych ulepszeń procesów, takich jak automatyzacja manualnych procesów i optymalizacja dostarczania danych.
• Tworzenie infrastruktury do optymalnego wydobywania, transformacji i ładowania (ETL) danych z różnych źródeł za pomocą SQL i technologii big data GCP.
• Współpraca z interesariuszami, w tym z zespołami Executive, Product, Data i Design, w celu wsparcia potrzeb infrastruktury danych.
• Tworzenie narzędzi danych dla członków zespołu analitycznego w celu wspierania budowy i optymalizacji naszego produktu na lidera branży.
• Ścisła współpraca z ekspertami ds. danych i analiz w celu poprawy funkcjonalności naszych systemów danych.

Co przyniesiesz:

• Zaawansowana znajomość baz danych SQL i NoSQL.
• Doświadczenie w budowaniu i optymalizacji big data pipeline'ów, architektur i zestawów danych.
• Zdolność do przeprowadzania analizy przyczyn źródłowych na danych i procesach wewnętrznych i zewnętrznych.
• Silne umiejętności analityczne związane z pracą z nieustrukturyzowanymi zestawami danych.
• Umiejętność tworzenia procesów wspierających transformację danych, struktury danych, metadane, zarządzanie zależnościami i obciążeniami.
• Doświadczenie w manipulowaniu, przetwarzaniu i wydobywaniu wartości z dużych zbiorów danych.
• Praktyczna znajomość systemów kolejkowania wiadomości, przetwarzania strumieniowego i wysoko skalowalnych magazynów big data.
• Silne umiejętności zarządzania projektami i organizacyjne.
• Doświadczenie we współpracy i wsparciu zespołów międzyfunkcyjnych.
• Minimum 3 do 6 lat doświadczenia w roli Inżyniera Danych.
• Tytuł magistra w dziedzinie Informatyki, Statystyki, Informatyki, Systemów Informacyjnych lub innego pokrewnego kierunku.
• Doświadczenie z narzędziami takimi jak Hadoop, Spark, Kafka oraz relacyjne bazy danych SQL i NoSQL, w tym Big Query i Cassandra.
• Doświadczenie w zarządzaniu pipeline'ami danych i narzędziami do zarządzania przepływem pracy, takimi jak Airflow.
• Doświadczenie z usługami chmurowymi GCP, takimi jak GCS, Dataproc, Dataplex oraz systemami przetwarzania strumieniowego, takimi jak Spark-Streaming i Storm.
• Biegłość w językach programowania obiektowego/skryptowego, takich jak Python, Scala.

O Walmart Global Tech:

Wyobraź sobie pracę w środowisku, gdzie jedna linia kodu może ułatwić życie setkom milionów ludzi. To właśnie robimy w Walmart Global Tech. Jesteśmy