Data Architect (AWS ,Pyspark)

Компанія: Arthur Grand Technologies Inc.

Розташування: Вілмінгтон, DE / Джерсі-Сіті, NJ

Тривалість: Довгостроковий контракт

Вебсайт: www.arthurgrand.com

Arthur Grand Technologies є провідним постачальником послуг з комплектування персоналу та технологічного консалтингу, з успішним досвідом подвоєння нашого доходу з року в рік за останні 5 років. Наші клієнти є свідченням наших тривалих відносин та задоволеності замовників. Наша керівна команда має понад 20-річний досвід роботи в провідних консалтингових компаніях. Як компанія, що належить до меншин, ми прагнемо сприяти різноманітності та інклюзії у нашому робочому середовищі.

Ми вважаємо важливим залучати наших співробітників до цікавих і викликових проектів. Ми пропонуємо конкурентні переваги, а також постійні можливості для професійного зростання та розвитку.

Arthur Grand Technologies шукає високомотивованого та кваліфікованого архітектора даних для приєднання до нашої команди та підтримки одного з наших ключових клієнтів.

• Забезпечувати рішення з інженерії даних та аналітики на основі AWS, PySpark та Databricks.
• Створювати та керувати великими сховищами даних або озерами даних.
• Оптимізувати процеси ETL, включаючи проєктування, кодування та налаштовування великих даних за допомогою Apache Spark.
• Створювати застосунки для потокової обробки даних.
• Писати робочі завдання на Scala/Spark для трансформації та агрегації даних.
• Створювати юніт-тести для трансформацій Spark та допоміжних методів.
• Писати документацію у стилі Scaladoc для всього коду.
• Проєктувати конвеєри обробки даних, використовуючи Scala з акцентом на функціональне програмування.
• Працювати з технологіями Embedded Cassandra, Apache Spark 2.x та виконувати налаштовування запитів Spark і оптимізацію продуктивності.
• Інтегруватися з SQL-базами даних, включаючи Microsoft, Oracle, Postgres та MySQL.
• Досвід роботи з DFS, S3, Cassandra та DynamoDB є перевагою.

• Більше 12 років досвіду роботи з проектами клієнтів, що включають AWS, PySpark та Databricks.
• Висока кваліфікація в програмуванні Scala (функціональне програмування) та пов'язаних тестових фреймворках (Scalatest, JUnit, Mockito).
• Міцні навички розробки баз даних у проєктах з міграції.

Подайте заявку сьогодні, щоб приєднатися до нашої команди інновацій, яка прагне до досконалості.

Дякую,

Афра Фаїза

Arthur Grand Technologies Inc.

Arthur Grand Technologies є роботодавцем з рівними можливостями (включаючи інвалідів/ветеранів).

Ваша інформація буде зберігатися конфіденційно згідно з керівництвом EEO.

Назва роботи: Архітектор даних (AWS, PySpark)