Senior Data Engineer

Job expired!

Witamy w Perchwell, najlepszym oprogramowaniu workflow i platformie danych zaprojektowanej dla profesjonalistów z branży nieruchomości i konsumentów. Wykorzystujemy podstawowe dane branżowe, aby zbudować nowoczesny pakiet oprogramowania, który umożliwia ekspertom w dziedzinie nieruchomości osiąganie sukcesów, oferowanie usług najwyższej jakości swoim klientom oraz rozwijanie swoich biznesów.

Wsparci przez liderów branży, takich jak Founders Fund, Lux Capital oraz kilka najbardziej prestiżowych Multiple Listing Services (MLS), Perchwell wprowadza nowatorskie oprogramowanie workflow i produkty danych dla rynku nieruchomości mieszkaniowych wartego wiele bilionów dolarów. Jako pierwszy nowy gracz od dekad, szybko skalujemy naszą najlepszą w swojej klasie platformę.

Perchwell dąży do stania się najszybciej rozwijającą się platformą workflow i danych MLS w kraju, a dane są integralną częścią naszej misji. Szukamy Senior Data Engineer, który będzie kierował naszymi projektami inżynierii danych, od tworzenia jeziora danych i rozwiązania magazynu danych, po rozszerzanie naszej istniejącej infrastruktury, aby włączyć wiele nowych MLS w nadchodzących miesiącach.

Jako Senior Data Engineer będziesz współpracować z zespołami międzyfunkcyjnymi, w tym Data Insights, Product, Design i innymi zespołami inżynieryjnymi, aby tworzyć solidne rozwiązania danych, przyczyniając się do osiągnięcia przez Perchwell pozycji wiodącej platformy workflow i danych MLS. Dołącz do naszego rosnącego zespołu i pomóż kształtować standardy, kulturę i wartości naszej ekspertyzy inżynierii danych.

Opracowywanie narzędzi ETL i rurociągów danych do integrowania danych z zewnętrznych źródeł i API do naszego systemu.
Projektowanie i wdrażanie zautomatyzowanych środków zarządzania danymi w celu poprawy jakości danych i ich obserwowalności.
Tworzenie procesów zespołowych i kultury skoncentrowanej na odpowiedzialności i poczuciu własności.
Współpraca z zespołem analityków danych przy przeprowadzaniu analiz, tworzeniu pulpitów danych i ocenie jakości danych.

Ponad 5 lat doświadczenia w inżynierii danych, w tym biegłość w Python, SQL lub Kotlin.
Doświadczenie w budowaniu skalowalnych i odpornych na błędy rurociągów danych z danych pochodzących z zewnętrznych API zarówno dla przypadków użycia batch jak i real-time.
Znajomość narzędzi ETL, takich jak Airflow (preferowane), Dagster, Prefect lub podobne frameworki.
Doświadczenie z architekturą chmurową (najlepiej AWS) i technologiami takimi jak S3, SQS, RDS, EMR, Glue, Athena i Lambda.
Biegłość w pracy z magazynami danych, takimi jak Snowflake (preferowane), Redshift lub Google BigQuery.
Doświadczenie w budowaniu rurociągów CI/CD za pomocą GitLab, GitHub Actions, Terraform lub Jenkins.
Znajomość architektury mikroserwisów i wdrażania jezior danych w chmurze.
Doskonałe umiejętności komunikacyjne, zarówno ustne, jak i pisemne, z udokumentowaną zdolnością do efektywnej współpracy z zespołami międzyfunkcyjnymi.

Ta rola jest zlokalizowana w naszym biurze w Nowym Jorku w Soho na Manhattanie, wymaga co najmniej 3 dni pracy w biurze w tygodniu.