Data Engineer - Information Systems

Biuro Sekretarza Stanu Illinois Alexi Giannoulias

Wydział:

Administracyjny

Lokalizacja:

115 S LaSalle St, Chicago, IL – Hrabstwo Cook

Wynagrodzenie:

W zależności od doświadczenia

Opis Stanowiska

Inżynier danych jest odpowiedzialny za projektowanie, budowanie i utrzymanie architektury umożliwiającej efektywne zbieranie, przechowywanie i analizę dużych wolumenów danych.

Obowiązki

• Projektowanie i budowa solidnych, skalowalnych potoków danych (np. ETL, Analiza w Czasie Rzeczywistym) do zbierania, integracji, przetwarzania i organizowania danych.
• Implementacja i zarządzanie bazami danych oraz rozwiązaniami do przechowywania danych zoptymalizowanymi pod kątem wydajności, niezawodności i skalowalności.
• Tworzenie systemów danych wspierających zbieranie, przechowywanie, przetwarzanie i analizowanie danych zgodnie z wymaganiami organizacji.
• Opracowanie i egzekwowanie polityk zarządzania danymi dla kontroli jakości, zarządzania i bezpieczeństwa danych.
• Monitorowanie, rozwiązywanie problemów i optymalizacja przepływów pracy danych w celu poprawy efektywności i zmniejszenia opóźnień.
• Współpraca z analitykami danych, naukowcami i zespołami biznesowymi w celu ustalenia potrzeb dotyczących danych i dostarczania rozwiązań opartych na danych.
• Implementacja środków bezpieczeństwa w celu ochrony danych i zapewnienia zgodności z przepisami i standardami ochrony danych (np. NIST 800-53).
• Dokumentowanie systemów i procesów danych oraz dzielenie się wiedzą techniczną z członkami zespołu.
• Wykonywanie innych zadań zgodnie z potrzebami lub poleceniami.

Specyficzne Umiejętności

• Biegłość w językach Python, Java, Scala lub SQL do manipulacji danymi i rozwijania potoków danych.
• Doświadczenie w pracy z technologiami dużych zbiorów danych, takimi jak Hadoop, Spark, Kafka i Hive.
• Znajomość tradycyjnych relacyjnych baz danych (MySQL, PostgreSQL) i baz danych NoSQL (MongoDB, Cassandra).
• Znajomość narzędzi do orkiestracji, takich jak Apache Airflow, Luigi lub AWS Data Pipeline.
• Rozumienie usług chmurowych oferowanych przez AWS, Google Cloud Platform lub Microsoft Azure.
• Umiejętności modelowania danych i projektowania procesów ETL.
• Skuteczna komunikacja w celu współpracy i wyjaśniania koncepcji technicznych nienależącym do techniki interesariuszom.
• Zdolność do analizy wymagań i projektowania złożonych systemów danych.
• Relewantne certyfikaty, takie jak AWS Certified Data Analytics, Google Cloud Professional Data Engineer, itd.
• Nastawienie na ciągłe uczenie się w celu integracji najnowszych technologii z ekosystemami danych.

Wymagania

• Gotowość do podróży i posiadanie ważnego prawa jazdy stanu Illinois jest obowiązkowe.
• Wykształcenie odpowiadające czterem lata studiów licencjackich na kierunku informatycznym, MIS, matematyce lub statystyce.
• Minimum trzy lata doświadczenia jako Inżynier Danych.

Proces Aplikacyjny

Aby aplikować, proszę wypełnić aplikację online na stronie