Lead Data Engineer ( AWS , Python)

Описание компании

Мы в Verisk являемся пионерами в использовании данных для открытия потенциала для будущих поколений. Сосредоточив внимание на устойчивости и резилентности, наши аналитические решения переплетают контент, данные и углубленные знания в различных секторах, давая толчок бизнесам и сообществам к укреплению и устойчивому росту.

Описание должности и основные обязанности

Цель роли: В роли ведущего инженера по данным вашей миссией будет укрепление и совершенствование инфраструктуры, необходимой для производительности нашего приложения. Это включает улучшение стабильности, консистентности и безопасности во всех производственных системах.

Ключевые обязанности:

• Создание и управление процессами непрерывной интеграции и доставки (CI/CD) для адаптации новых служб в соответствии с требованиями проекта.
• Координация установки служб AWS, функций API и планов сборки, помощь как локальным, так и удаленным командам.
• Обеспечение безупречных процессов развертывания от начала до конца и поддержание оптимальной производительности ресурсов AWS, сведение к минимуму простоев, вызванных человеческими ошибками.
• Улучшение существующих и разработка новых облачных сред, предоставление стратегических планов внедрения.
• Устранение сбоев в производстве путем решения основных причин и последующего устранения проблем.
• Поддержка наших разработчиков путем устранения неполадок сервера, разрешения проблем среды и настройки инструментов разработки, таких как репозитории Git.
• Взаимодействие с командами EDM для обеспечения соблюдения протоколов DevOps и процессов CI/CD среди членов команды.
• Стимулирование улучшения производительности системы через автоматизацию, интеграцию скриптов и проактивные стратегии управления проблемами.
• Следование за новейшими технологиями, включение инновационных решений для решения уникальных операционных задач.

Требования:

• Степень бакалавра в области компьютерных наук, информационных систем или в смежной области.
• Минимум 8-10 лет опыта работы с технологиями AWS (например, EC2, ECS, S3, SQS, RDS, DynamoDB).
• Знание Docker, AWS Cloud Formation, Databricks, AWS EMR и управления базами данных RDS.
• Опыт работы с инструментами CI/CD, такими как GitLab и Terraform,