Senior Data Engineer (AWS+Python)

🌟 Czy jesteś tech wizjonerem, który pragnie napędzać innowacje w rozwoju oprogramowania? 3Pillar Global poszukuje pasjonata na stanowisko Starszego Inżyniera Danych, który będzie prowadził transformatywne projekty danych używając najnowocześniejszych technologii. Ta rola jest Twoją bramą do wpływania na decyzje oparte na danych, które rewolucjonizują branże. 🔮🌐

Jako Starszy Inżynier Danych, Twoje główne zadania będą obejmować:

• Projektowanie, rozwijanie i utrzymywanie zaawansowanych potoków danych za pomocą AWS oraz innych technologii, aby zapewnić optymalną dostępność i jakość danych.
• Budowanie i utrzymanie RESTful API w celu usprawnienia dostępu do danych oraz integracji systemów.
• Rozwijanie i optymalizacja zapytań SQL dla efektywnego wydobywania danych, transformacji i ładowania (ETL).
• Zarządzanie wieloma projektami, efektywne priorytetyzowanie zadań i przestrzeganie terminów.
• Zapewnienie jakości danych, dokładności i wydajności w dużych zbiorach danych.
• Ścisła współpraca zarówno z zespołami technicznymi, jak i interesariuszami biznesowymi w celu przekładania wymagań danych na solidne rozwiązania techniczne.
• Implementacja procesów transformacji, integracji i walidacji danych w celu wsparcia analiz i raportowania.
• Optymalizacja potoków danych dla zwiększonej szybkości, niezawodności i efektywności.
• Przestrzeganie najlepszych praktyk dla przechowywania, pobierania i archiwizacji danych, aby zagwarantować bezpieczeństwo danych i dostępność.
• Diagnozowanie i rozwiązywanie problemów związanych z danymi we współpracy z zespołem.
• Dokumentacja procesów danych i specyfikacji technicznych dla spójności i przyszłych odniesień.
• Udział w przeglądach kodu w celu zapewnienia zgodności ze standardami kodowania i najlepszymi praktykami.
• Współpraca z zespołami DevOps w celu automatyzacji wdrożenia i monitorowania potoków danych.
• Wykorzystywanie usług chmurowych, szczególnie AWS, do projektowania i wdrażania skalowalnych i opłacalnych rozwiązań danych.
• Bycie na bieżąco z nowymi technologiami, narzędziami i metodologiami w ciągle ewoluującym krajobrazie inżynierii danych.

Wymarzony kandydat powinien posiadać:

• Udowodnione doświadczenie w inżynierii danych ze specjalizacją w projektowaniu, rozwijaniu i utrzymywaniu potoków danych za pomocą AWS.
• Ekspertyzę w Pythonie do przetwarzania i analizy danych oraz wszechstronną wiedzę o AWS dla przechowywania danych, obliczeń i analityki.
• Solidne fundamenty w chmurze, usługach (preferowane AWS), SQL i REST API.
• Dobre zrozumienie architektury danych, modelowania i koncepcji magazynów danych.
• Doświadczenie w praktykach DevOps, w tym automatyzacja CI/CD za pomocą narzędzi takich jak Terraform i Jenkins.
• Płynność w języku angielskim, umo