Senior Big Data Engineer

TransUnion szuka pełnego pasji i zaangażowania Starszego Inżyniera Big Data, który dołączy do naszego dynamicznego zespołu Inżynierii Danych i Analityki. Jako globalny lider w dostarczaniu informacji i wniosków, TransUnion oferuje innowacyjne rozwiązania, które wspierają możliwości gospodarcze, poprawiają doświadczenia i dają siłę jednostkom na całym świecie. Dołącz do nas, aby dostarczać Informacje dla Dobrego®.

Jesteśmy wiodącą agencją kredytową, która oferuje specjalistyczne usługi w zakresie zapobiegania oszustwom, zarządzania tożsamością i ryzykiem, podejmowania decyzji automatycznych oraz analizy demograficznej. Obsługujemy różnorodne sektory, w tym finanse, handel detaliczny, telekomunikację, energetykę, gry, sektor publiczny i ubezpieczenia, w ponad 30 krajach.

Co przyniesiesz:

• Pasja do Inżynierii Danych i Analityki
• Ekspertyza w nowoczesnych rozwiązaniach Big Data na dużą skalę
• Umiejętność ekstrakcji, czyszczenia, transformacji i analizy ogromnych zbiorów danych
• Biegłość w budowaniu pipeline’ów danych i integracjach API
• Głęboka znajomość wszystkich etapów zarządzania cyklem życia danych
• Możliwość wdrażania najlepszych praktyk w zakresie analizy danych
• Silne umiejętności rozwiązywania problemów i analizy
• Doskonale rozwinięte umiejętności komunikacyjne i prezentacyjne

Kluczowe odpowiedzialności:

• Projektowanie, budowanie, testowanie i wdrażanie skalowalnych rozwiązań Big Data
• Współpraca z interesariuszami w celu zrozumienia wymagań i dostarczania rozwiązań
• Monitorowanie, identyfikowanie i rozwiązywanie problemów technicznych
• Wsparcie naukowców danych i partnerów biznesowych w korzystaniu z naszej platformy
• Szacowanie wysiłku, identyfikowanie ryzyk i planowanie skutecznej realizacji
• Dostarczanie projektów rozwiązań Big Data od początku do końca

Umiejętności i doświadczenie:

• 5+ lat doświadczenia w technologiach Big Data, takich jak Spark, Hive i Hadoop
• Silna znajomość SQL
• Doświadczenie w R i Sparklyr
• Biegłość w projektowaniu i wdrażaniu pipeline’ów danych
• Znajomość dystrybucji Hadoop (Cloudera, Hortonworks, Mapr)
• Doświadczenie z platformami chmurowymi (AWS, Azure, GCP) i narzędziami Big Data (AWS EMR, AWS Glue, AWS Kinesis, Azure Data Lake)
• Biegłość w przetwarzaniu danych wsadowych, strumieniowych w czasie rzeczywistym, procesach ETL i narzędziach Business Intelligence
• Eksperckość w modelach danych logicznych, projektowaniu hurtowni danych i baz danych
• Umiejętność pisania skomplikowanych, zoptymalizowanych zapytań dla dużych zbiorów danych
• Doświadczenie z Airflow będzie dodatkowym atutem

Wpływ, jaki wywrzesz:

TransUnion oferuje środowisko zorientowane na rozwój, w którym zachęca się do ciągłego uczenia się. Jeśli nie posiadasz wszystkich wymienionych umiejętności, nie martw się - istnieje wiele możliwości do nauki i rozwoju z nami. Prowadząc kulturę z