Data Architect (AWS ,Pyspark)

Компания: Arthur Grand Technologies Inc.

Местоположение: Уилмингтон, DE / Джерси-Сити, NJ

Продолжительность: Долгосрочный контракт

Вебсайт: www.arthurgrand.com

Arthur Grand Technologies — ведущий поставщик услуг по подбору персонала и технологическому консультированию, демонстрирующий отличный результат роста доходов на протяжении последних 5 лет. Наши клиенты являются свидетельством долгосрочных отношений и удовлетворенности клиентов. Руководство компании имеет более 20 лет опыта работы в ведущих консалтинговых фирмах. Как компания, принадлежащая представителям меньшинств, мы стремимся развивать разнообразие и инклюзию в нашей рабочей среде.

Мы верим в поддержание вовлеченности наших сотрудников через сложные и интересные проекты. Мы предлагаем конкурентные льготы, а также постоянные возможности для профессионального роста и развития.

Arthur Grand Technologies ищет высокомотивированного и квалифицированного архитектора данных, чтобы присоединиться к нашей команде и поддерживать одного из наших ключевых клиентов.

• Поставка решений по инженерии данных и аналитике на основе AWS, PySpark и Databricks.
• Создание и управление очень большими хранилищами данных или озерами данных.
• Оптимизация процессов ETL, включая разработку, кодирование и настройку процессов работы с большими данными с использованием Apache Spark.
• Создание приложений для обработки потока данных.
• Создание задач на Scala/Spark для преобразования и агрегации данных.
• Написание модульных тестов для Spark-преобразований и вспомогательных методов.
• Написание документации в стиле Scaladoc для всего кода.
• Проектирование конвейеров обработки данных с использованием Scala, с фокусом на функциональную парадигму программирования.
• Работа с такими технологиями, как Embedded Cassandra, Apache Spark 2.x, и настройка запросов Spark для повышения производительности.
• Интеграция с SQL-базами данных, включая Microsoft, Oracle, Postgres и MySQL.
• Предпочтительно знание DFS, S3, Cassandra и DynamoDB.

• Более 12 лет опыта работы с проектами клиентов, включающими AWS, PySpark и Databricks.
• Опыт работы с Scala (функциональное программирование) и соответствующими фреймворками тестирования (Scalatest, JUnit, Mockito).
• Сильные навыки разработки баз данных в проектах по миграции.

Подайте заявку сегодня, чтобы присоединиться к нашей инновационной команде, нацеленной на совершенство.

Спасибо,

Афра Фаиза

Arthur Grand Technologies Inc.

Arthur Grand Technologies является работодателем с равными возможностями (включая инвалидов и ветеранов).

Ваша информация будет храниться конфиденциально в соответствии с руководящими принципами EEО.

Название должности: Архитектор данных (AWS, PySpark)