Senior Data Engineer - Azure

В Quantiphi технологии движут нашим бизнесом, но именно глобальная и разнообразная культура определяет наш успех. Мы страстно относимся к нашим людям и гордимся созданием культуры, основанной на прозрачности, разнообразии, честности, обучении и росте. Если вы ищете атмосферу, которая поощряет инновации и стремление к совершенству не только в профессиональной, но и в личной жизни, то Quantiphi - это место для вас!

Опыт

3 до 6 лет

Местоположение

Мумбаи/Бангалор/Тривандрум (гибридный формат)

Необходимые навыки

• Глубокие знания и опыт работы с Microsoft Azure, включая Azure Data services такие как Azure SQL Database, Azure Data Lake Storage, Azure Synapse, Azure Databricks, Azure Data Factory и др.
• Сильные навыки моделирования данных для создания эффективных и масштабируемых данных решений.
• Опыт интеграции данных, процессов ETL и разработки конвейеров данных с использованием сервисов Azure.
• Глубокое понимание принципов управления данными, безопасности данных и требований к соответствию (например, GDPR, HIPAA), а также умение внедрять их в средах Azure.
• Опыт работы с системами управления реляционными и NoSQL базами данных и способность выбирать подходящие решения для хранения различных типов данных.
• Знание SQL для запросов и работы с реляционными базами данных, а также знание баз данных NoSQL.
• Знакомство с инструментами анализа данных и платформами отчетности, такими как Power BI, Tableau или аналогичными.
• Сильные навыки программирования на таких языках как Python, Java или C# для сценариев, автоматизации и манипуляции данными.
• Умение управлять проектами, связанными с данными, работать в сотрудничестве с межфункциональными командами и соблюдать дедлайны проектов.
• Высокие навыки документирования и отличные коммуникативные навыки для передачи сложных технических концепций не техническим заинтересованным сторонам.

Желательные навыки

• Соответствующие сертификаты Microsoft Azure, такие как Azure Data Engineer или Azure Solutions Architect, могут повысить вашу надежность.
• Знание технологий обработки больших данных, таких как Hadoop и Spark для работы с большими наборами данных.
• Опыт работы с Snowflake.
• Знакомство с концепциями машинного обучения и Azure Machine Learning для внедрения моделей, основанных на данных.
• Опыт работы с практиками DevOps и конвейерами непрерывной интеграции/непрерывного развертывания (CI/CD) для данных решений.
• Понимание технологий обработки данных в реальном времени и потоковой аналитики, таких как Azure Stream Analytics.
• Навыки в области продвинутой аналитики, анализа данных и статистического анализа.

Роль и обязанности

• Разработка решений для интеграции данных для переноса данных из различных источников в Azure, обеспечение качества и согласованности данных.
• Выбор и внедрение подходящих решений для хранения данных Azure для различных типов данных и их оптимизация по производительности и стоимости.
• Реализация решений для обработки данных с использованием сервисов Azure, оптимизация по производительности и масштабируемости.
• Выполнение проектов по миграции данных, включая миграцию из локальных сред в Azure и между различными облачными платформами.
• Установление и соблюдение политик управления данными, обеспечение соблюдения данных регуляторных требований и отраслевых стандартов.
• Мониторинг решений для данных по производительности и стоимости, внесение необходимых корректировок для оптимизации.
• Создание моделей данных в соответствии с потребностями клиентов.
• Документирование архитектуры данных и решений