Sr. Data Engineer (Python/Spark)

Присоединяйтесь к ведущему лидеру в области финансовых и экономических данных для инвестиционно-банковского сектора. Мы ищем опытного Старшего Инженера по Дданным, который станет важной частью расширяющейся команды нашего клиента. Внимание: Эта должность доступна только для W2 или индивидуальных контрактов; заявки C2C не принимаются.

Должность предполагает 100% удаленную работу. Ваши основные обязанности будут включать:

• Анализ требований к системе для разработки адаптивных алгоритмов и решений.
• Создание эффективных ETL-процессов с использованием Spark.
• Использование технологий больших данных и облачных технологий для создания высококачественного, готового к производству кода.
• Участие в настройке производительности и масштабируемости систем.
• Сотрудничество с членами команды, коллегами и руководством для определения ключевых целей и приоритетов.
• Участие в основных инженерных действиях SDLC, таких как планирование спринтов и оценка задач.
• Эффективное функционирование в небольших, гибких командах.
• Предоставление инновационных решений сложных проблем.
• Идентификация возможностей для улучшения и их эффективное воплощение.

Чтобы преуспеть в этой должности, вам потребуется:

• 6+ лет проверенного профессионального опыта в сфере ИТ.
• Опыт работы с AWS EMR.
• Степень в области компьютерных наук или смежных дисциплин.
• 3-5 лет подтвержденного опыта разработки решений для больших данных на облачной платформе AWS с использованием PySpark, особенно в области аналитики данных.
• 3-5 лет опыта разработки приложений с использованием Python.
• 3-5 лет опыта работы со Spark.
• Опыт разработки решений по инженерии данных на Python с использованием: S3, EMR, Glue, Athena, Kafka и ноутбуков.
• Опыт разработки распределённых решений для больших данных, включая сбор, кэширование, обработку, потребление и мониторинг данных.
• Сильные навыки технической коммуникации.

Дополнительные знания, которые выделят вас среди остальных:

• Опыт работы с технологиями больших данных и открытого исходного кода.
• Опыт работы по методологии Agile (Scrum).
• Успешный опыт разработки серверных частей и API для SaaS приложений с использованием различных инструментов.
• Способность преобразовывать абстрактные бизнес-требования в конкретные технические планы.
• Глубокое понимание алгоритмов, структур данных и архитектуры программного обеспечения, включая анализ временной и пространственной сложности.
• Способность быстро обучаться и адаптироваться к новым технологиям в области больших данных.

Спасибо за внимание к данной вакансии!

Компания: ASCENDING
Название вакансии: Старший Инженер по Дданным (Python/Spark)