Azure Data Engineer - Assistant Manager
- Azure
- Other places
- 06/16/2024
- -
Присоединяйтесь к KPMG India в качестве инженера данных Azure и продвигайте свою карьеру в ведущей глобальной консалтинговой компании.
A. Обязательный опыт:
• Минимум 4+ лет опыта консалтинга или оказания клиентских услуг на Azure.
• По крайней мере 4+ года опыта разработки загрузки данных, обработки данных и аналитических конвейеров для больших данных, реляционных баз данных (например, MySQL) и решений для хранилищ данных (например, Snowflake).
• Обширный опыт предоставления практических рекомендаций в рамках Azure Native сервисов и Hadoop.
• Сильный практический опыт в реализации загрузки данных, ETL и обработки данных с использованием сервисов Azure, таких как ADLS, Azure Data Factory, Azure Functions, Synapse/DW, Azure SQL DB, Event Hub, IoT Hub, Azure Stream Analytics, Azure Analysis Service, HDInsight, Databricks, Azure Data Catalog и Cosmos DB.
• Владение технологиями Azure и Big Data, такими как Java, Python, SQL, ADLS/Blob, Spark/SparkSQL, Databricks, Hive и стриминговыми решениями, такими как Kafka, EventHub, NiFi.
• Знание DevSecOps и CI/CD развёртываний.
• Знакомство с методологиями и процессами миграции в облако, включая Azure Data Factory, Data Migration Service, Event Hub, Kafka.
• Минимум 4+ года опыта работы с RDBMS.
• Опыт использования форматов файлов Big Data и методов сжатия данных.
• Владение инструментами разработки, такими как Azure DevOps, Visual Studio Team Server, Git, Jenkins.
• Опыт работы как с частными, так и с публичными облачными архитектурами, понимание их преимуществ/недостатков и аспектов миграции.
• Степень бакалавра или выше по информатике или смежной дисциплине, или эквивалент (минимум 7 лет опыта работы).
Инженер данных Azure будет:
• Проектировать, строить и поддерживать инфраструктуру данных с использованием облачных сервисов Azure.
• Создавать конвейеры данных и интегрировать данные из различных источников.
• Реализовывать меры безопасности и конфиденциальности данных.
• Отслеживать и устранять проблемы с потоками данных.
• Оптимизировать хранение и обработку данных для повышения производительности и снижения затрат.
B. Комплементарные навыки:
• Опыт в DevOps на платформе Azure.
• Опыт разработки и развёртывания ETL-решений на Azure.
• Владение технологиями IoT, событийно-ориентированной, микросервисной архитектурой и контейнерами/Kubernetes в облаке.
• Знакомство с технологическим стеком управления метаданными в отрасли: управление данными, качество данных, MDM, родословная, Data Catalog.
• Знакомство с технологиями управления данными, их загрузкой, захватом, обработкой и курированием: Kafka, StreamSets, Attunity, GoldenGate, MapReduce, Hadoop, Hive, HBase, Cassandra, Spark, Flume, Impala.
• Опыт работы с несколькими облаками (Azure, AWS, Google) является плюсом.
Если вы соответствуете этим требованиям и вдохновлены возможностью использовать свои знания в области инженерии данных Azure, мы приглашаем вас подать заявку на позицию помощника менеджера в KPMG India.
Начните свое карьерное путешествие с KPMG India уже сегодня!