Big Data Engineer

Обзор позиции:

NorthBay Solutions активно ищет опытных Инженеров по работе с большими данными с 2 до 3+ лет опыта для укрепления нашей динамичной команды. Идеальные кандидаты должны продемонстрировать сильные знания в области инженерии данных, акцентируя внимание на передовых облачных решениях и обладать высокой квалификацией в SQL. Эта ключевая роль включает в себя разработку, реализацию и поддержку данных пайплайнов для обработки потоковых и пакетных данных и требует эффективного устранения проблем с данными.

Присоединяйтесь к нам в наших офисах в Лахоре, Карачи или Исламабаде. Данная позиция предлагает гибкий формат работы, который сочетает в себе возможность работать как в офисе, так и удаленно, чтобы наилучшим образом соответствовать вашим потребностям.

Инженер по большим данным будет:

• Разрабатывать, реализовывать и поддерживать процессы ETL/ELT, критически важные как для потоковой, так и для пакетной обработки данных.
• Разрабатывать и улучшать пайплайны данных с использованием передовых решений для облачных хранилищ данных и озер данных, таких как Snowflake, BigQuery, Redshift и Azure Synapse.
• Диагностировать и решать проблемы с данными, обеспечивая немедленные решения и устраняя основные причины для устойчивой работы.
• Использовать инструменты AWS, включая S3, DMS, Glue и Athena, для создания масштабируемых и надежных решений для данных.
• Сотрудничать с межфункциональными командами для точного понимания требований к данным, разрабатывая индивидуальные решения, которые способствуют достижению бизнес-целей.
• Применять инструменты трансформации данных, такие как dbt, для эффективного моделирования и трансформации данных для аналитики и отчетности.

Кандидат должен иметь:

• Степень бакалавра в области компьютерных наук, инженерии или в смежной дисциплине.
• Более 3 лет профессионального опыта в инженерии данных.
• Продвинутые знания SQL и широкий опыт работы с современными облачными хранилищами данных и озерами данных.
• Отличную репутацию в диагностике и решении проблем, связанных с данными.
• Знание сервисов AWS, включая S3, DMS, Glue и Athena.
• Опыт работы с dbt или аналогичными инструментами трансформации данных.

Мы ценим дополнительные навыки,