Pessoa Data Engineer - ETL

В Zup мы ценим экспоненциальный рост в нашей работе, потому что верим, что он питает технологии, которые преобразуют жизни, максимизируют неиспользованный талант из-за отсутствия доступа и позиционируют неблагополучные регионы как центры высококачественных технологий. Кроме того, мы выступаем за #Свободу, позволяя сотрудникам Zup работать из любого места — будь то удаленно, из наших офисов или в гибридной модели.

Как ключевой член команды данных Zup, вы будете использовать свой опыт, чтобы внести культуру принятия решений на основе данных в нашу клиентскую базу и продукты. Ваши обязанности будут включать:

• Понимание потребностей бизнеса и обеспечение предоставления ценности.
• Проектирование архитектуры и оценка технологий для решения соответствующих задач.
• Реализация цепочек обработки данных для поддержки архитектуры Data Mesh.
• Разработка переиспользуемых компонентов, таких как соединители, API, SDK, CLI.
• Автоматизация и тестирование для обеспечения эффективности и эффективности.
• Разработка решений на основе отзывов пользователей.
• Содействие технологическому инновационному развитию и качеству внутри продукта и рабочего места.

Вы должны обладать твердыми знаниями в области обработки данных и облачных решений для данных, в частности:

• Обработка данных в больших масштабах, параллельная и распределенная обработка (Apache Spark, Hadoop, Hive и т. д.);
• Опыт работы с услугами AWS для данных и аналитики (Glue, EMR, Athena, Quicksight);
• Владение Python;
• Экспертиза в области облачных служб AWS (S3, Lambda, SQS, DynamoDB, API Gateway);
• Практический опыт работы с SQL базами данных и NoSQL (документальные и ключ-значение);
• Практики DevOps и инфраструктура как код (Terraform, CodePipeline и т.д.).

• Опыт в инициативах по демократизации данных с использованием Data Mesh;
• Знакомство с Stackspot или аналогичными корпоративными платформами для разработчиков;
• Знание инструментов для наблюдения (Cloudwatch, CloudTrail, Prometheus и т.д.);
• Опыт разработки решений для финансовых институтов.

Ваш профессиональный рост — это только часть уравнения — ваше физическое и психическое здоровье для нас так же важны:

• Возможность удаленной и гибкой работы;
• Помощь в обучении по курсам