Data Engineer

Opis firmy:

Blue Orange Digital to firma zajmująca się transformacją danych w chmurze i rozwojem analityki predykcyjnej, z biurami w Nowym Jorku i Waszyngtonie. Obsługujemy zróżnicowaną grupę klientów, od innowacyjnych startupów po uznane firmy z listy Fortune 500, wykorzystując nowoczesne techniki analityki danych, wizualizacje oraz AI/ML. Założona przez inżynierów, mamy pasję do technologii i danych. Nasze startupowe DNA gwarantuje, że każdy członek zespołu bezpośrednio przyczynia się do wzrostu naszej firmy.

Blue Orange Digital aktywnie poszukuje doświadczonego Inżyniera Danych, aby wzmocnić naszą praktykę inżynierii danych. Ta rola wymaga zróżnicowanego zestawu umiejętności, w tym administracji systemami, DevOps, automatyzacji infrastruktury, modelowania danych i orkiestracji pracy. Tworzymy kompleksowe platformy i systemy danych dla różnych klientów, dlatego biegłość w nowoczesnych technologiach danych jest niezbędna. Idealny kandydat będzie zaznajomiony z wieloma technologiami inżynierii danych i środowiskami, szczególnie z Azure DevOps, Databricks i Pythonem.

• Współpraca z zespołami danych w celu projektowania, budowania i wdrażania platform danych w chmurze (Azure, AWS, GCP) oraz automatyzacja ich operacji.
• Wykorzystanie Azure DevOps, Azure Pipelines, Terraform, CloudFormation i innych narzędzi automatyzacji do konstruowania solidnych systemów.
• Tworzenie wysokowydajnych potoków danych z wykorzystaniem Databricks, Spark, Pythona i innych narzędzi orkiestracji/ETL.
• Zapewnienie przywództwa w zakresie najlepszych praktyk rozwoju oprogramowania, w tym CI/CD, Infrastructure as Code i testowania automatycznego.
• Wsparcie różnorodnych środowisk technologicznych, w tym systemów Windows i Linux.
• Tworzenie wielokrotnego użytku, automatyzowanych procesów i niestandardowych narzędzi.
• Wykonywanie innych obowiązków zgodnie z poleceniami menedżera.

• Dyplom licencjata/inżyniera (BA/BS) w dziedzinie informatyki lub pokrewnej dziedziny technicznej, lub równoważne doświadczenie praktyczne.
• Minimum 2 lata doświadczenia w budowaniu i wspieraniu platform danych.
• Doświadczenie z technologiami danych, takimi jak Azure Data Factory, Azure Synapse Analytics, Airflow, Spark itd.
• Doświadczenie z platformami danych w chmurze, w tym Snowflake i Databricks.
• Zaawansowana biegłość w Pythonie, SQL i skryptowaniu Bash.
• Doświadczenie w projektowaniu i budowaniu solidnych potoków CI/CD.
• Silne umiejętności administracji systemami Linux.
• Komfort w pracy z Docker, narzędziami zarządzania konfiguracją i monitoringu.
• Znajomość najlepszych praktyk związanych z bezpieczeństwem, wydajnością i odzyskiwaniem po awarii.
• Doświadczenie w pracy w środowiskach chmurowych, szczególnie Azure i AWS.
• Kolektywny sposób podejścia do architektury i dzielenia się projektami.
• Doskonałe umiejętności komunikacji werbalnej i pisemnej w języku angielskim.
• Rozsądne osądy, dobry humor i uczciwość w dynamicznym środowisku.

• Certyfikaty z Azure DevOps, Azure Data Fundamentals,