Senior Data Engineer - Acquisition & Infrastructure

Job expired!

Poszukujemy doświadczonego Starszego Inżyniera Danych do dołączenia do zespołu Eon Systems, pionierskiej firmy na skrzyżowaniu neuronauki i sztucznej inteligencji. Stanowisko to skupia się na pozyskiwaniu, obsłudze i przetwarzaniu skomplikowanych danych neurologicznych, odgrywając kluczową rolę w kształtowaniu naszych możliwości uczenia maszynowego.

Jako kluczowy członek naszego dedykowanego zespołu będziesz:

  • Budować, utrzymywać i optymalizować oparte na chmurze potoki danych od chwili pozyskania danych do ich przetwarzania, zapewniając, aby służyły potrzebom naszych modeli uczenia maszynowego.
  • Zarządzać pozyskiwaniem petabajtów różnorodnych i multimodalnych zestawów danych online.
  • Ocenić, oczyścić i zorganizować nieustrukturyzowane i zaszumione zestawy danych, przygotowując je do zastosowań analitycznych.
  • Współpracować ściśle z inżynierami ML, aby opracować API umożliwiające wprowadzenie przetworzonych danych mózgowych do środowisk treningowych.
  • Udoskonalić funkcjonalność, skalowalność i dostępność potoków danych na wszystkich płaszczyznach.
  • Współpracować zarówno z zespołami pozyskiwania danych mózgowych ludzi i zwierząt, jak i grupami inżynieryjnymi AI, aby zmostkować przepaść między zbieraniem danych a zastosowaniem modelu.
  • Zaprojektować i stworzyć procesy walidacji i zapewnienia jakości, aby utrzymać wysokie standardy danych.

Podczas twojej kadencji, zaangażujesz się w projekty takie jak:

  • Pobieranie i przetwarzanie wstępne zestawów danych neuro z ponad 10 repozytoriów i zapewnienie ich integracji z naszymi potokami treningowymi.
  • Tworzenie innowacyjnego systemu walidacji do automatycznej oceny i poprawy jakości zestawów danych na podstawie określonych metryk.
  • Ekstrakcja i harmonizacja metadanych z różnych źródeł, aby jeszcze bardziej wzbogacić zestawy danych.
  • Wizualizacja kluczowych wskaźników wydajności, aby ocenić i poprawić skuteczność przetwarzanych danych.

Idealny kandydat na to stanowisko powinien wykazywać:

  • Udowodnione doświadczenie w zarządzaniu, przetwarzaniu wstępnym i organizowaniu dużych, nieuporządkowanych, nieustrukturyzowanych zestawów danych, najlepiej w kontekście badań naukowych.
  • Ekspertyzę w rozwijaniu i utrzymaniu opartych na chmurze potoków danych, idealnie z wiedzą na temat AWS i innych platform chmurowych.
  • Mocną znajomość frameworków uczenia maszynowego i implikacji przetwarzania wstępnego danych na wydajność modeli.
  • Zdolność do wdrażania skutecznych procedur walidacji i oczyszczania danych.
  • Wyśmienite umiejętności zarządzania projektami i zaangażowanie w dostarczanie technicznych rozwią