Data Engineer

Обзор роли инженера по данным:

Exiger в поисках опытного Инженера по данным для улучшения наших продуктов и предоставления сложных решений в области данных. Эта роль предполагает сотрудничество с нашими командами управления продукцией и инженерии для проектирования, разработки и внедрения данных пайплайнов и индивидуальных интеграций данных для наших клиентов. Как ключевой игрок в нашей команде, вы будете способствовать повышению эффективности проектов для клиентов и внутри компании, консультировать по нашему технологическому плану и оставаться на передовой новых технологических трендов.

Ключевые обязанности:

• Проектирование и выполнение эффективных пайплайнов данных в сотрудничестве с межфункциональными командами.
• Разработка и поддержка процессов ETL и обеспечение плавного приема данных в наших хранилищах данных.
• Применение принципов инфраструктуры как кода с использованием инструментов типа Terraform для автоматизации управления инфраструктурой данных.
• Обеспечение целостности и консистентности данных через всесторонние проверки качества данных на протяжении всего жизненного цикла данных.
• Оптимизация схем баз данных и моделей данных для лучшей масштабируемости и производительности.
• Создание и совершенствование SQL-запросов для улучшения возможностей анализа данных и отчетности.
• Поддержка развертывания и постоянного мониторинга пайплайнов данных в производственной среде.
• Постоянное ознакомление с новыми технологиями и лучшими практиками в области инженерии данных и автоматизации инфраструктуры.

Что вам необходимо для успеха:

• Степень бакалавра в области компьютерных наук, инженерии или смежных направлений.
• Минимум 3-5 лет опыта работы в инженерии данных.
• Высокая квалификация в Python и знакомство с концепциями баз данных, включая SQL и NoSQL.
• Опыт работы с SQL Server, MySQL, Snowflake и другими крупными СУБД.
• Знание облачных платформ, таких как AWS, Azure и GCP, и технологий контейнеризации, таких как Docker и Kubernetes.
• Опыт или знания о Terraform и других инструментах инфраструктуры как кода будут преимуществом.
• Способность получить допуск безопасности, предпочтение отдаётся кандидатам, уже имеющим такой допуск.
• Знакомство с Git BitBucket, SOA, микросервисами, системами очеред