AWS Data Engineer

Место работы: Хайдарабад, Индия

Обзор роли:

Мы ищем опытного инженера по данным AWS для улучшения нашей платформы данных следующего поколения. В этой важной роли вы будете использовать передовые технологии, чтобы максимизировать бизнес-ценность наших данных. Тесно сотрудничая с межфункциональными командами, вы будете обеспечивать доступность, качество и надежность данных. Используйте свои знания в облачных вычислениях, инфраструктуре как коде (IaC), программировании на Python, CI/CD и методологиях Agile для продвижения наших инициатив в области данных.

Ключевые обязанности:

• Разработка и внедрение эффективных ETL-процессов и конвейеров данных.
• Создание фреймворков для приема и обработки данных, как пакетных, так и потоковых.
• Выявление и устранение узких мест в производительности конвейеров данных и запросов.
• Развертывание с использованием платформ CI/CD (Jenkins, Shell Scripting, Unit/Integration Testing).
• Интенсивная работа с технологиями AWS (S3, DynamoDB, Glue, Athena, EMR, Redshift, Lambda, Kinesis, MSK, Airflow).
• Разработка программного обеспечения на Python (PySpark/Spark SQL)/Java, используя Databricks.
• Использование принципов IaaC для управления облачными ресурсами.
• Внедрение управления данными, метаданными, хранения, аварийного восстановления и проверок качества.
• Настройка систем мониторинга, оповещения и логирования для обнаружения проблем с данными.
• Следование лучшим практикам Agile разработки и SDLC.
• Эффективное сотрудничество и коммуникация между командами.

Необходимая квалификация:

• 2-3 года опыта в ETL-процессах, конвейерах данных и моделировании данных.
• Опыт работы с фреймворками приема и обработки данных.
• Профессиональные знания сервисов AWS и программирования на Python/Java.
• Твердые знания платформ CI/CD и процессов развертывания.
• Понимание управления данными и проверок качества.
• Знакомство с Agile разработкой программного обеспечения.
• Способность к эффективному сотрудничеству и коммуникации.

Желательная квалификация:

• Желательно более 4 лет опыта.
• Знание стандартов безопасности данных (например, GDPR) и сетевых практик.
• Опыт работы с API-решениями, Docker и Kubernetes.

Почему выбирают нас:

Помимо щедрой базовой заработной платы, наша программа льгот и вознаграждений ориентирована на личностное и карьерное развитие:

• Конкурентоспособные зарплаты на основе опыта.
• Годовой бонус на усмотрение по результатам работы.
• 30 дней оплачиваемого отпуска.
• Медицинское страхование для вас и ваших иждивенцев до 5 человек.
• Пособие на личные интересы для хобби или освоения новых навыков.
• Денежный подарок для новых членов семьи (34,000 INR).
• 26 недель отпуска по уходу за основным опекуном и 4 недели отпуска для вторичного опекуна.
• Поддержка обучения до £2000 или эквивалент в местной валюте, выделенные часы на обучение, доступ к Udemy и Mindtools, и программы лидерства.

Равные возможности:

Мы в компании Flutter International стремимся создавать инклюзивную среду, в которой вы можете быть собой. Мы ценим разнообразие и уважаем уникальность каждого.