Senior Data Engineer

Мы ищем опытного инженера по обработке данных, чтобы присоединиться к нашей команде в известной шведской многонациональной телекоммуникационной компании и мобильной сети.

Как старший инженер по обработке данных, вы будете играть ключевую роль в разработке, внедрении и поддержке надежных конвейеров данных, которые обеспечивают работу наших аналитических платформ и платформ бизнес-анализа. Ваши обязанности будут включать:

• Подключение и интеграцию новых источников данных в нашу инфраструктуру данных.
• Разработку, развитие и поддержание процессов ETL для обеспечения своевременной и точной загрузки данных.
• Планирование и управление рабочими процессами данных с использованием Apache Airflow.
• Оптимизацию и устранение неполадок задач обработки данных для повышения производительности и надежности.
• Сотрудничество с учеными по данным, аналитиками и другими заинтересованными сторонами для понимания требований к данным и предоставления решений.
• Обеспечение качества и согласованности данных из различных источников и форматов.
• Внедрение и поддержание решений для хранения данных с использованием HDFS, Object Storage и S3.
• Работу с форматами данных, такими как AVRO, Parquet, JSON и XML.
• Использование CI/CD инструментов для автоматизации развёртывания и обеспечения бесшовной интеграции.
• Поддержку и документирование кода в репозиториях с использованием GitHub.

Чтобы быть успешным в этой роли, вы должны обладать:

• Подтвержденной экспертизой в работе с Apache Spark и Scala.
• Опытным использованием Apache Airflow для планирования и управления рабочими процессами.
• Знанием различных форм хранения данных (HDFS, Object Storage, S3).
• Умением работать с различными форматами данных (AVRO, Parquet, JSON, XML).
• Пониманием процессов и инструментов CI/CD.
• Сильными навыками решения проблем и способностью устранять сложные проблемы с данными.
• Отличными коммуникативными и сотрудничественными навыками.
• Способностью работать как самостоятельно, так и в команде в быстро меняющейся среде.

В Globaldev Group мы ценим наших сотрудников и рады предложить:

• 20 дней отпуска плюс официальные праздники.
• Возможность удаленной работы или работы в нашем технохабе в Варшаве.
• Поддержку заботливой команды HR.
• Возможности обмена опытом и работы с талантливыми коллегами.

Если вы увлечены инженерией данных и хотите работать в динамичной и инновационной команде, мы будем рады услышать вас. Подайте заявку сейчас, чтобы присоединиться к Globaldev Group в качестве старшего инженера по обработке данных.

Название компании: Globaldev Group
Название должности: старший инженер по обработке данных