Dołącz do naszego zespołu jako Lead AWS Data Engineer - praca zdalna
Jesteśmy podekscytowani, mogąc ogłosić możliwość kariery na stanowisku Lead AWS Data Engineer w Perficient. Mimo że nasza siedziba znajduje się w St. Louis, MO, jest to pozycja zdalna, otwarta dla kandydatów z całych Stanów Zjednoczonych, pracujących w strefie czasowej wschodniej (ET).
Przegląd stanowiska:
Jako zmotywowany Lead AWS Data Engineer, będziesz odgrywać kluczową rolę w budowaniu wydajnych i skalowalnych potoków danych przy użyciu AWS. Twoja wiedza na temat usług ETL AWS umożliwi Ci projektowanie, rozwój i zarządzanie rozwiązaniami integracji dużych zbiorów danych, zapewniając najwyższą jakość danych, bezpieczeństwo i wydajność.
Kluczowe obowiązki:
- Projektowanie i wdrażanie solidnych potoków danych przy użyciu usług AWS takich jak Glue, Lambda, Step Functions i Kinesis.
- Zarządzanie i mentoring zespołu inżynierów ETL, rozwijanie ich umiejętności i prowadzenie udanych projektów integracji danych.
- Optymalizacja istniejących potoków danych dla lepszej wydajności, skalowalności i efektywności kosztowej.
- Opracowywanie kompleksowej dokumentacji w celu zachowania przejrzystości i ułatwienia transferu wiedzy.
- Wprowadzanie dokładnych kontroli jakości danych i monitorowanie procesów w celu utrzymania integralności danych na całym przepływie ETL.
- Praca w ścisłej współpracy z analitykami danych, naukowcami danych i interesariuszami biznesowymi w celu skutecznego spełnienia wymagań ETL.
- Zapewnienie bezpiecznego dostępu do danych poprzez zarządzanie politykami AWS Identity and Access Management (IAM) i użycie Infrastructure as Code (IaC) z narzędziami takimi jak Terraform.
- Bycie na bieżąco z najnowszymi rozwojami w usługach danych AWS i najlepszymi praktykami ETL w celu ciągłego doskonalenia naszych procesów.
- Rozwiązywanie i diagnozowanie skomplikowanych problemów w potokach danych w celu zapewnienia płynnej operacji danych.
Wymagania:
- Minimum 3 lata doświadczenia w projektowaniu i implementacji potoków danych opartych na AWS.
- Udowodnione osiągnięcia z usługami ETL AWS takimi jak Glue, Lambda, Step Functions i Kinesis.
- Solidne zrozumienie koncepcji magazynowania danych i modelowania danych.
- Znajomość SQL, Pythona lub Bash do manipulacji i automatyzacji danych.
- Zaawansowane doświadczenie w metodologiach zapewnienia jakości danych.
- Świetne umiejętności komunikacji, współpracy, przywództwa i rozwiązywania problemów.
- Zdolność skutecznego przewodzenia i mentorowania młodszych członków zespołu.
Preferowane dodatkowe umiejętności:
- Znajomość Amazon DynamoDB, Amazon Aurora, Redshift i Snowflake.
- Doświadczenie z Docker, Kubernetes i metodologiami CI/CD dla potoków danych.