Sr. Data Engineer (Python/Spark)

Приєднуйтеся до відомого лідера у сфері фінансових та економічних даних для інвестиційно-банківського сектора. Ми шукаємо досвідченого Старшого Інженера Даних, щоб стати важливою частиною команди нашого клієнта, яка розширюється. Увага: ця роль призначена тільки для W2 або індивідуальних контрактів; C2C заявки не будуть розглядатися.

Роль на 100% віддалена. Ваші основні обов'язки включатимуть:

• Аналіз вимог системи для проєктування алгоритмів та рішень, що реагують на зміни.
• Створення ефективних ETL-конвеєрів за допомогою Spark.
• Використання технологій "великі дані" та хмарних технологій для створення високоякісного, готового до виробництва коду.
• Участь в оптимізації продуктивності та масштабуванні інженерних рішень.
• Співпраця з членами команди, колегами та менеджментом для визначення ключових цілей та пріоритетів.
• Участь в основних інженерних заходах ЖЦРП (SDLC), таких як планування спринту та оцінка витрат.
• Ефективне функціонування в невеликих, гнучких командах.
• Запропонування інноваційних рішень для складних проблем.
• Визначення можливостей для покращення та їх ефективне впровадження.

Щоб досягти успіху на цій посаді, вам знадобиться:

• 6+ років підтвердженого професійного досвіду в ІТ-індустрії.
• Досвід роботи з AWS EMR.
• Ступінь у галузі комп'ютерних наук або суміжних галузях.
• 3-5 років підтвердженого досвіду у створенні рішень на основі великих даних у хмарі AWS з використанням PySpark, особливо у сфері аналітики даних.
• 3-5 років досвіду у розробці додатків з Python.
• 3-5 років досвіду роботи з Spark.
• Практичний досвід у розробці рішень для інженерії даних на Python з використанням: S3, EMR, Glue, Athena, Kafka та блокнотів.
• Практичний досвід у створенні розподілених рішень для великих даних, включаючи завантаження, кешування, обробку, споживання та моніторинг.
• Сильні навички технічної комунікації.

Додаткова експертиза, яка виділить вас серед інших кандидатів, включає:

• Досвід роботи з великими даними та відкритими технологіями.
• Досвід роботи за методологією Agile (Scrum).
• Підтверджений досвід у розробці бекендів для SaaS додатків та API з використанням різних інструментів.
• Вміння перетворювати абстрактні бізнес-вимоги на дієві технічні плани.
• Сильне розуміння алгоритмів, структури даних та архітектури програмного забезпечення, включаючи аналіз складності часу та простору.
• Здатність швидко вчитися та адаптуватися до нових технологій у галузі великих даних.

Дякуємо за увагу до цієї можливості!

Компанія: ASCENDING