DataOps - La redoute Porto

Główne obowiązki

Reakcja na incydenty

• Zrozumienie problemów z perspektywy użytkownika i jasna komunikacja w celu zrozumienia problemu.
• Reprodukcja błędów lub problemów, z którymi spotykają się użytkownicy.
• Zastosowanie analizy przyczyny źródłowej, aby szybko i skutecznie zidentyfikować przyczynę problemu, naprawienie go, przetestowanie i komunikacja z końcowym użytkownikiem.
• Pisanie raportów podsumowujących każdy krok w rozwiązywaniu problemu oraz pomagających zespołowi śledzić wszystkie problemy.
• Monitorowanie istniejących procesów i infrastruktury oraz wykonywanie tych samych zadań podczas odkrywania błędów/problematycznych sytuacji poprzez monitorowanie i alertowanie.

Konserwacja

• Monitorowanie procesów i infrastruktury w celu identyfikacji potencjalnych problemów.
• Dostosowywanie konfiguracji, aby procesy i infrastruktura działały zgodnie z oczekiwaniami, zapewniając płynne prowadzenie operacji bez incydentów.

Optymalizacja baz danych

• Śledzenie kosztów i czasu przetwarzania poprzez dedykowane dashboardy.
• Ostrzeganie osób, które nieefektywnie przetwarzają zapytania do tabel, powodując wysokie koszty.
• Identyfikacja i rozwiązywanie nieefektywnych zadań, widoków i tabel, zapewniając optymalne koszty i szybkość wykonania.
• Optymalizacja zadań, zapytań i tabel w celu poprawy zarówno kosztów, jak i szybkości wykonania.

Zarządzanie infrastrukturą

• Zarządzanie infrastrukturą za pomocą Terraform.
• Dzielenie się i proponowanie najlepszych praktyk.
• Wycofywanie niepotrzebnych infrastruktur, takich jak usługi, tabele, czy maszyny wirtualne.

Wdrażania

• Śledzenie przyszłych wdrożeń z Architektem Danych i uczestnictwo w Przeglądach Wdrożeniowych.
• Dzielenie się i proponowanie najlepszych praktyk w zakresie wdrożeń.
• Wspieranie Inżynierów Danych w całym procesie wdrożeniowym i następujących po nim fazach aktywnego monitorowania.
• Zapewnienie rzetelnego stosowania procesów wdrożeniowych, strategii rejestrowania i monitorowania.
• Przejęcie nowych wdrożonych procesów w trakcie biegu.

Wymagane umiejętności techniczne

• Google Cloud Platform: Ogólna wiedza na temat platformy i różnych usług, co najmniej roczne doświadczenie z GCP.
• Apache Airflow: Co najmniej dwa lata doświadczenia z Airflow; doświadczenie z Google Composer to plus.
• Google BigQuery: Szerokie doświadczenie (co najmniej 4 lata) z GBQ, w tym optymalizacja tabel i zapytań oraz projektowanie architektury baz danych.
• Terraform: Co najmniej dwa lata doświadczenia z Terraform i znajomość najlepszych praktyk GitOps.
• Apache Spark: To opcjonalna ekspertyza, którą cenimy; niektóre z naszych potoków używają pySpark.

Dodatkowa wiedza i doświadczenie (uznawane za plus)

• Pub/Sub
• Kafka
• Azure Analysis Services
• Optymalizacja Google Cloud Storage

Aplikuj teraz, aby dołączyć do Alter Solutions jako specjalista DataOps w La Redoute Porto. Optymalizuj i zarządzaj naszą nowoczesną infrastrukturą!