Senior Big Data Engineer

Вы увлекаетесь большими данными и имеете солидный опыт в области инженерии данных? NorthBay Solutions активно набирает старших специалистов по разработке программного обеспечения, специализирующихся на больших данных, чтобы присоединиться к нашей динамичной и мультикультурной команде.

• Проектировать и разрабатывать решения с использованием передовых технологий больших данных.
• Работать над высоко сложными распределенными системами и облачными технологиями с нуля.
• Разрабатывать и управлять сложными ETL задачами и конвейерами данных.
• Сотрудничать с членами команды и улучшать методы работы с данными.
• Развертывать модели данных в производственных средах, включая конфигурацию атрибутов данных и управление вычислительными ресурсами.
• Внедрять новшества и улучшать лучшие практики, поддерживать и наставлять других членов команды.
• Решать сложные технические проблемы и давать существенные рекомендации по улучшению процессов.

• Более 4 лет опыта в области ETL Data Engineering, Python и технологий больших данных (Hadoop, Spark, Hive).
• Опыт работы с распределенными технологиями и фреймворками, такими как Hadoop, Spark и Kafka.
• Отличное понимание цикла ETL и конвейеров обработки данных.
• Умение создавать и управлять крупномасштабными ETL конвейерами в среде AWS (EMR, Glue, Lambda, Athena).
• Сильные навыки разработки программного обеспечения и программирования на Python, PySpark и/или Scala.
• Опыт работы с реляционными и колонкальными базами данных (PostgreSQL, MySQL, Redshift, BigQuery, HBase, ClickHouse).
• Знание технологий контейнеризации и конвейеров CI/CD (Docker, Jenkins).
• Знание основных сервисов GCP (BigQuery, Cloud Composer, Cloud Storage) будет плюсом.
• Практический опыт работы с инструментами управления данными AWS (Data Lake, Databricks, Snowflake) является преимуществом.
• Опыт работы с Jira и методологиями Agile разработки.
• Сильная целостность, профессионализм и умение работать в команде.
• Инициативность и способность к самостоятельной работе, сильные навыки решения проблем.

Станьте частью глобальной команды экспертов по инженерии данных, работающих над захватывающими и сложными проектами. Вносите вклад в рост и развитие команды и принимайте участие в многочисленных профессиональных задачах вместе с выдающимися специалистами в области технологий.

Заинтересованные кандидаты приглашаются подать заявку на должность старшего инженера по большим данным в NorthBay Solutions и сделать следующий шаг в своей профессиональной карьере.

Название компании: NorthBay Solutions
Название должности: Senior Big Data Engineer