Inżynier Danych (Hybrydowy)

  • Full Time
Job expired!
Co oferujemy: Rozwój kariery zawodowej Konkurencyjne wynagrodzenie i benefity Transparentność płac Globalne możliwości Dowiedz się więcej tutaj: https://www.dematic.com/en-us/about/careers/what-we-offer Dematic zapewnia równe szanse na zatrudnienie dla wszystkich pracowników i kandydatów do pracy, i zabrania dyskryminacji i nękania jakiejkolwiek formy bez względu na rasę, kolor skóry, wyznanie, wiek, płeć, narodowość, stan zdrowia, genetykę, status weterana chronionego, orientację seksualną, tożsamość płciową lub wyrażanie siebie, czy jakąkolwiek inną cechę chronioną przez federalne, stanowe lub lokalne prawa. Ta polityka dotyczy wszystkich warunków zatrudnienia, w tym rekrutacji, zatrudnienia, umieszczenia, awansu, zwolnienia, zwolnienia, powrotu do pracy, transferu, urlopów, wynagrodzenia i szkolenia. Podstawowy zakres wynagrodzenia dla tej roli jest szacowany na $65,000.00 - $140,000.00 w momencie publikacji. Ostateczne wynagrodzenie będzie określane przez różne czynniki, takie jak miejsce pracy, wykształcenie, doświadczenie, wiedza i umiejętności. #LI-DP1 Zadania i kwalifikacje: Czego szukamy: Obowiązki: Projektowanie, tworzenie i utrzymanie skalowalnych i efektywnych strumieni danych do ekstrakcji, przekształcania i ładowania (ETL) danych z różnych źródeł do jezior danych i magazynów danych. Projektowanie i rozwijanie mikrousług w celu Współpraca z naukowcami danych, analitykami i zespołami wielofunkcyjnymi w zakresie projektowania modeli danych, schematów baz danych i rozwiązań do przechowywania danych. Implementacja integracji danych i procesów kontroli jakości, aby zapewnić dokładność i niezawodność danych dla celów analitycznych i raportowania. Optymalizacja przechowywania danych, przetwarzania i wydajności zapytań dla dużych zbiorów danych. Aktywacja zaawansowanej analityki i możliwości uczenia maszynowego na platformie danych. Nieustanna kontrola i poprawa jakości danych i praktyk zarządzania danymi. Bycie na bieżąco z najnowszymi trendami, technologiami i najlepszymi praktykami w inżynierii danych. Wymagania: Licencjat lub inżynier w dziedzinie informatyki, inżynierii lub pokrewnej dziedzinie. 5+ lat udowodnionego doświadczenia w inżynierii danych, hurtowniach danych, i procesach ETL. Biegłość w narzędziach i technologiach inżynierii danych, takich jak SQL, Python, Spark, Hadoop, Airflow, Apache Kafka i Presto. Doświadczenie z formatami tabel, takimi jak Apache Iceberg lub Delta Lake. Doświadczenie w projektowaniu i tworzeniu infrastruktury oraz prac przebiegających w czasie rzeczywistym. Stałe doświadczenie z liniami danych, jakością danych i obserwowalnością danych. Doświadczenie w projektowaniu i tworzeniu mikrousług oraz architekturą rozproszoną. Praktyka w pracy z chmurowymi platformami danych (np. AWS, Azure, GCP), najlepiej GCP i architekturą jezior danych. Bardzo dobre doświadczenie z technologiami konteneryzacji, takimi jak Docker, Kubernetes. Silne zrozumienie modelowania danych, architektury danych, i zasad zarządzania danymi. Doskonałe umiejętności związane z zasadami DataOps i automatyzacją testów. Znajomość przetwarzania i zapytywania danych przy użyciu rozproszonych systemów i baz danych NoSQL. Zdolność do optymalizacji i strojenia przetwarzania i przechowywania danych pod względem wydajności i kosztów. Doskonałe umiejętności rozwiązywania problemów i zdolność do pracy nad złożonymi wyzwaniami inżynierii danych. Silne umiejętności komunikacyjne i do współpracy w celu efektywnej pracy z zespołami wielofunkcyjnymi. Doświadczenie w mentorowaniu i prowadzeniu młodszych inżynierów danych jest dodatkowym atutem. Relewantne certyfikacje inżynierskie danych lub technologii chmurowych są pożądane. Fajnie, gdybyś miał/miała: Doświadczenie pracy w architekturze Data Mesh. Doświadczenie w dziedzinie łańcucha dostaw.