Data Architect (AWS ,Pyspark)

Firma: Arthur Grand Technologies Inc.

Lokalizacja: Wilmington, DE / Jersey City, NJ

Czas trwania: Długoterminowy kontrakt

Strona internetowa: www.arthurgrand.com

Arthur Grand Technologies jest wiodącym dostawcą usług rekrutacyjnych i konsultingowych w zakresie technologii, z silnym rekordem podwajania naszych przychodów rok po roku przez ostatnie 5 lat. Nasi klienci są świadectwem naszych długotrwałych relacji i zadowolenia klientów. Nasz zespół kierowniczy ma ponad 20 lat doświadczenia wyniesionego z najlepszych firm konsultingowych. Jako firma należąca do mniejszości etnicznych, jesteśmy zaangażowani w promowanie różnorodności i integracji w naszym zespole.

Wierzymy w angażowanie naszych pracowników poprzez wymagające i interesujące projekty. Oferujemy konkurencyjne korzyści, a także stałe możliwości rozwoju zawodowego.

Arthur Grand Technologies poszukuje wysoko zmotywowanego i wykwalifikowanego Architekta Danych do dołączenia do naszego zespołu i wsparcia jednego z naszych kluczowych klientów.

• Dostarczanie rozwiązań z zakresu Inżynierii Danych i Analiz opartych na AWS, PySpark i Databricks.
• Budowa i obsługa bardzo dużych hurtowni danych lub jezior danych.
• Optymalizacja procesów ETL, w tym projektowanie, kodowanie i dostrajanie procesów Big Data z użyciem Apache Spark.
• Tworzenie aplikacji do przetwarzania danych w czasie rzeczywistym.
• Tworzenie zadań Scala/Spark do przetwarzania i agregacji danych.
• Produkcja testów jednostkowych dla transformacji Spark i metod pomocniczych.
• Pisanie dokumentacji w stylu Scaladoc dla całego kodu.
• Projektowanie przepływów przetwarzania danych z użyciem Scala, skupiając się na paradygmacie programowania funkcyjnego.
• Praca z technologiami takimi jak Embedded Cassandra, Apache Spark 2.x, oraz dostrajanie zapytań i optymalizacja wydajności Spark.
• Integracja z bazami danych SQL, w tym Microsoft, Oracle, Postgres i MySQL.
• Preferowane doświadczenie z DFS, S3, Cassandra i DynamoDB.

• 12+ lat doświadczenia w pracy z projektami klientów obejmującymi AWS, PySpark i Databricks.
• Biegłość w Scala (programowanie funkcyjne) i powiązane frameworki testowe (Scalatest, JUnit, Mockito).
• Silne umiejętności w zakresie tworzenia baz danych na potrzeby projektów migracyjnych.

Aplikuj już dziś, aby dołączyć do naszego innowacyjnego zespołu, zobowiązanego do doskonałości.

Dziękuję,

Afrah Faiza

Arthur Grand Technologies Inc.

Arthur Grand Technologies jest pracodawcą oferującym równe szanse (w tym niepełnosprawnym / weteranom).

Twoje informacje będą traktowane jako poufne zgodnie z wytycznymi EEO.

Stanowisko: Architekt Danych (AWS, PySpark)