Інженер з обробки даних

Опис ролі/відділу: Команда корпоративних даних та інсайтів FactSet надає дієві наради на основі послідовних, надійних даних за допомогою розгорнутої системи аналізу, інфраструктури та візуалізації. Наша місія полягає в тому, щоб наділити персонал можливостями для прийняття обґрунтованих рішень, які стимулюють створення цінностей, росту та ефективності на всіх рівнях підприємства. Ми в даний час шукаємо кандидата з сильними знаннями в сучасних, хмарних технологіях обробки даних (бажано Databricks), щоб створювати та підтримувати стабільні та масштабовані рішення для введення та зберігання терабайтів даних у нібито реальному часі. Обов'язки: Проектувати та розробляти процеси обробки і зберігання даних. Співпрацювати з іншими інженерами для інтеграції наборів даних для створення комплексного рішення. Розробляти проекти за допомогою Azure/Lambda functions або Databricks. Покращувати корпоративний сховище даних, використовуючи методології Kimball. Відмінні навички планування, організації та керівництва для оцінювання, відстеження та завершення завдань. Надавати підтримку виробництва із можливістю роботи поза годинами. Необхідні навички: Вища освіта, бажано в галузі комп'ютерних наук або еквівалентний професійний досвід. 2+ років практичного досвіду роботи з проектуванням та реалізацією потоків даних за допомогою Databricks або аналогічних ETL-інструментів (AWS Glue). 2+ роки досвіду роботи з Аdvanced SQL програмуванням, роботи з великими наборами даних. Сильний практичний досвід роботи з SQL та PySpark. Розуміння архітектури Lakehouse за допомогою Delta Lake або Iceberg. Розуміння інтеграції REST API, Key Value data stores та Caching technologies. Розуміння основних концепцій розподілених баз даних, таких як Redshift, Snowflake, тощо. Сильні технічні, аналітичні, вирішення проблем та комунікаційні навички. Бажані сертифікати: AWS Certified Database - Specialty. AWS Certified Data Analytics - Specialty. Azure Data Engineer Associate (DP 203). Databricks Certified Data Engineer Professional. Databricks Certified Associate Developer for Apache Spark 3.0 – Python. Різноманіття: У FactSet ми святкуємо різноманіття думки, досвіду та поглядів. Ми зосереджені на боротьбі з упередженнями і прозорості процесу найму. Усі кваліфіковані заявники будуть розглянуті для працевлаштування незалежно від раси, кольору шкіри, походження, етнічності, релігії, статі, національності, статевої орієнтації, віку, громадянства, сімейного стану, інвалідності, статевої самоідентифікації, сімейного статусу або ветеранського статусу. FactSet бере участь у E-Verify. Повернення на роботу: Повертаєтесь з перерви? Ми тут, щоб вам допомогти! Якщо ви брали перерву в кар'єрі і хочете повернутися, ми заохочуємо вас подати заявку і поспілкуватися з нашими рекрутерами про нашу доступну підтримку, яка допоможе вам відновити свою кар'єру.