Sr. Cloud Data Engineer

Мы - Федеральный резервный банк Сан-Франциско, преданные государственные служащие, имеющие миссию по улучшению национальных денежно-кредитных, финансовых и платежных систем, способствующую укреплению экономики для всех американцев. Как банк, вовлеченный в общественную деятельность, мы стремимся понимать и обслуживать яркие и обширные сообщества Двенадцатого округа. В основе нашей деятельности лежит уважение к индивидуальным вкладам и личностным качествам, а также предоставление возможностей для обучения и роста. Наша гибкая гибридная модель работы поддерживает здоровый баланс между работой и личной жизнью, позволяя работать удаленно в одни дни и сотрудничать в офисе в другие дни.

Мы ищем динамичного старшего инженера облачных данных для присоединения к нашей команде по работе с данными и аналитикой (DAS). Наша команда предоставляет централизованную платформу данных и аналитики, предлагая передовые решения для миграции данных и аналитики нашим клиентам. Это включает хранение данных, обработку, интеграцию, озера данных, хранилища данных и аналитику.

Как старший инженер облачных данных, вы будете сотрудничать с архитекторами данных, владельцами продуктов, инженерами по дизайну, разработчиками и бизнес-аналитиками в быстро меняющейся среде. Вы будете определять решения, разрабатывать и внедрять инфраструктуру как код, используя наш CI/CD pipeline. Эта роль является ключевой для формирования разработки и поддержки наших дорожных карт продуктов, продвижения наших облачных платформ для анализа данных.

Основные обязанности

• Понимание технологического видения и стратегического направления бизнес-потребностей.
• Определение технических требований для обеспечения аналитики данных в AWS-облаке, основанной на архитектуре data mesh.
• Проектирование интегрированных решений в соответствии с шаблонами дизайна, руководствами и лучшими практиками для продуктов платформ данных.
• Разработка архитектуры и концептуальных решений, включающих облачные натурные и сторонние продукты.
• Анализ текущего состояния и будущего состояния, сотрудничество с менеджером продукта для определения ключевых результатов стратегии IT платформы данных.
• Проведение исследований и выполнение POCs с новыми технологиями, внедряя лучшие отраслевые практики для продвижения облачной платформы данных, используя архитектуру data mesh.
• Проектирование, разработка и внедрение решений ETL с низким кодом.
• Разработка RESTful API и интеграции с API Gateway.
• Автоматизация инфраструктуры как кода для повышения эффективности сборки в облаке с использованием Terraform, Python и сценариев оболочки ОС.
• Интеграция множества источников данных в платформу данных и аналитики.
• Создание платформы, поддерживающей высокую доступность и восстановление после сбоев.
• Разработка решений для потоковой передачи данных, миграции и репликации.
• Консультирование и предоставление рекомендаций по разработке бизнес-решений в области данных и аналитики и облачных технологий.
• Проявление лидерства, сотрудничества, исключительных коммуникативных, переговорных и стратегических навыков.
• Взаимодействие с высшим руководством и бизнес-лидерами для представления бизнес-ценности.
• Содействие сотрудничеству между бизнесом и ИТ-организациями.

Квалификации

• Бакалаврская степень в области компьютерных наук, управления информационными системами, компьютерного проектирования или в смежной области (предпочтительно наличие ученой степени).
• 7+ лет проектирования и разработки ETL-услуг с обширным опытом разработки, разработки и внедрения облачных решений.
• 5+ лет полного цикла разработки, включая приложения, API, тестирование и автоматизацию с использованием таких языков, как Terraform, JSON и Python.
• 3+ года опыта проектирования, разработки и поддержки крупных решений, размещенных в облаке (AWS) или на месте.