Inżynier Danych

Przegląd pracy Poszukujemy wysoce kwalifikowanego Starszego Inżyniera Danych do naszego zespołu skupionego na danych. Idealny kandydat powinien być ekspertem w dziedzinie inżynierii danych, z bogatym doświadczeniem w korzystaniu z narzędzi i języków takich jak AWS S3, Pentaho, AWS API, Snowflake, Hurtownie danych, procesy ETL/ELT, AWS Code Commit, AWS Code Deploy, AWS Code Build, Looker, Shell script i Python. Do obowiązków na tym stanowisku należy tworzenie, utrzymanie i optymalizacja architektur danych, strumieni przepływu danych i zestawów danych, aby zaspokoić nasze różnorodne potrzeby biznesowe. Obowiązki Architektura i projektowanie danych: - Projektowanie, budowa, konfiguracja i utrzymanie skalowalnych i solidnych architektur danych. - Współpraca z Snowflake i AWS w celu zapewnienia efektywnych rozwiązań z zakresu hurtowni danych. Integracja danych: - Tworzenie, testowanie i utrzymanie procesów ETL/ELT za pomocą Pentaho. - Budowanie solidnych strumieni przepływu danych na potrzeby działań analitycznych i inicjatyw związanych z nauką o danych. Wdrażanie danych i automatyzacja: - Korzystanie z AWS Code Commit, AWS Code Deploy i AWS Code Build dla gładkiego wdrażania i automatyzacji. - Implementacja kontroli jakości danych, monitoringu i walidacji. Współpraca i wsparcie: - Współpraca z analitykami danych, specjalistami ds. nauki o danych i innymi zainteresowanymi stronami. - Wsparcie użytkowników biznesowych za pomocą Looker do wizualizacji danych i uzyskiwania wniosków. - Udzielanie wsparcia i wskazówek młodszym inżynierom danych. Scripting i rozwój: - Wykorzystanie Pythona i skryptów Shell do tworzenia i automatyzowania zadań przetwarzania danych. Kwalifikacje: - Licencjat lub magister z dziedziny informatyki, inżynierii lub pokrewnego kierunku. - Ponad 5 lat praktycznego doświadczenia w inżynierii danych. - Znajomość następujących technologii: - AWS S3, Pentaho, AWS API, Snowflake, AWS Code Commit, AWS Code Deploy, AWS Code Build. - Znaczne doświadczenie w zakresie hurtowni danych, procesów ETL/ELT. - Biegłość w Pythonie, Shell script i Looker. - Silne umiejętności rozwiązywania problemów, uwaga na szczegóły oraz zdolność do pracy w szybkim tempie. Wymagania Główny nacisk na 3 aspekty: - Snowflake - Pentaho - S3