- Минимум 10-14 лет опыта работы в сфере консалтинга или предоставления клиентских услуг на платформе Azure.
- Доказанный опыт работы в качестве архитектора Azure, проектирование и предоставление архитектурных решений на основе требований заказчика.
- Опыт настройки окружений Azure в соответствии с лучшими практиками Microsoft.
- Способность управлять архитектурой, определять стандарты, руководства и лучшие практики на этапах внедрения.
- Отслеживание статуса проекта, обзор артефактов от членов команды и направление для устранения любых отклонений.
- Опыт лидерства в наставлении команд.
- Как минимум 5 лет опыта в разработке каналов обработки данных, аналитических процессов для больших данных, реляционных баз данных, таких как MySQL, и решений для дата-вохаусов, таких как Snowflake.
- Обширный практический опыт работы с Azure Native services и Hadoop.
- Практический опыт внедрения загрузки данных, ETL и обработки с использованием служб Azure (ADLS, Azure Data Factory, Azure Functions, Synapse/DW, Azure SQL DB, Event Hub, IOT Hub, Azure Stream Analytics, Azure Analysis Service, HDInsight, Databricks, Azure Data Catalog, Cosmo DB).
- Минимум 3 года практического опыта работы с технологиями Azure и Big Data, такими как Python, SQL, ADLS/Blob, Spark/SparkSQL, Databricks, Hive и потоковыми технологиями, такими как Kafka, EventHub, NiFi.
- Опыт разработки на Pyspark в Databricks.
- Опыт в DevSecOps и CI/CD развёртываниях.
- Понимание методологий миграции в облако и инструментов, таких как Azure Data Factory, Data Migration Service, Event Hub, Kafka.
- Минимум 3 года опыта работы с RDBMS.
- Опыт использования форматов файлов Big Data и технологий сжатия.
- Опыт работы с инструментами разработчика, такими как Azure DevOps, Visual Studio Team Server, Git, Jenkins.
- Опыт с частными и публичными облачными архитектурами, включая плюсы и минусы, и соображения по миграции.
- Степень бакалавра или выше в области вычислительной техники или смежной дисциплине; или эквивалент (минимум 2 года рабочего опыта). Если степень младшего специалиста, необходимо иметь эквивалент минимум 2 года рабочего опыта.
Как Azure Data Engineer, вы будете отвечать за проектирование, строительство и поддержание инфраструктуры данных для нашей организации с использованием облачных сервисов Azure. Обязанности включают:
- Создание каналов данных и интеграция данных из различных источников.
- Внедрение мер безопасности и конфиденциальности данных.
- Мониторинг и устранение проблем с потоками данных.
- Оптимизация хранения данных и обработки для повышения производительности и эффективности затрат.
- DevOps на платформе Azure.
- Опыт разработки и развертывания ETL-решений на Azure.
- Знание IoT, -событийно-ориентированных, микросервисов и контейнеров/Kubernetes в облаке.
- Знакомство с технологическим стеком управления метаданными (Data Governance, Data Quality, MDM, Lineage, Data Catalog и т.д.).
- Знакомство с технологическим стеком управления данными (Kafka, StreamSets, Attunity, GoldenGate, Map Reduce, Hadoop, Hive, Hbase, Cassandra, Spark, Flume, Hive, Impala).
- Опыт работы с мульти-облачной средой является плюсом (Azure, AWS, Google).
Присоединяйтесь к KPMG India в качестве Azure Data Engineer и помогайте создавать надежные решения для данных для наших клиентов. Подайте заявку сейчас и станьте