Sr Data Engineer

KPMG India - Открытая вакансия старшего инженера по данным

Мы ищем высококвалифицированного старшего инженера по данным с опытом работы в Azure для присоединения к нашей команде. Идеальный кандидат должен обладать следующими навыками:

• Как минимум 7 лет опыта в консультировании или оказании услуг клиентам по работе с Azure.
• Минимум 4 года разработки процессов загрузки, обработки данных и аналитических конвейеров для больших данных, MySQL и Snowflake.
• Обширный опыт работы с внутренними службами Azure и Hadoop.
• Практический опыт внедрения загрузки данных, ETL и обработки данных с использованием служб Azure, таких как ADLS, Azure Data Factory, Azure Functions, Synapse/DW, Azure SQL DB, Event Hub, IOT Hub, Azure Stream Analytics, Azure Analysis Service, HDInsight, Databricks, Azure Data Catalog, и Cosmo DB, среди других.
• Как минимум 3 года опыта работы с технологиями Azure и Big Data, такими как Python, SQL, ADLS/Blob, Spark/SparkSQL, Databricks, Hive, Kafka, EventHub, и NiFi.
• Умение разработывать на Pyspark в Databricks.
• Глубокое понимание DevSecOps и CI/CD деплоев.
• Знакомство с методологиями и инструментами миграции в облако, такими как Azure Data Factory, Data Migration Service, Event Hub, Kafka.
• Минимум 3 года опыта работы с RDBMS.
• Опыт работы с форматами файлов Big Data и техниками сжатия.
• Уверенное владение инструментами для разработчиков, такими как Azure DevOps, Visual Studio Team Server, Git, и Jenkins.
• Опыт работы с архитектурами частных и публичных облаков, включая их плюсы/минусы и особенности миграции.
• Степень бакалавра или выше в области информатики или смежной дисциплины (минимум 2 года опыта работы) или эквивалент.

В качестве старшего инженера по данным в KPMG India, вы будете отвечать за:

• Проектирование, создание и поддержание инфраструктуры данных с использованием облачных служб Azure.
• Создание конвейеров данных, интеграцию данных из различных источников и внедрение мер по обеспечению безопасности и конфиденциальности данных.
• Мониторинг, устранение неполадок потоков данных и оптимизация хранения и обработки данных для повышения производительности и экономичности.

Хотя данные навыки не обязательны, они будут очень полезны:

• Экспертиза в DevOps на платформе Azure.
• Опыт разработки и развертывания ETL-решений на Azure.
• Знание IoT, событийно-ориентированных, микросервисов и Контейнеров/Kubernetes в облаке.
• Знакомство с технологиями управления метаданными, такими как Data Governance, Data Quality, MDM, Lineage и Data Catalog.
• Знание стэков управления данными, их загрузки, захвата, обработки и курирования, таких как Kafka, StreamSets, Attunity, GoldenGate, Map Reduce, Hadoop, Hive, Hbase, Cassandra, Spark, Flume, Hive и Impala.
• Опыт работы с несколькими облачными платформами, включая Azure, AWS и Google, является плюсом.

Присоединяйтесь к KPMG India в качестве старшего инженера по данным и станьте частью команды, продвигающей инновации в управлении данными и облачных технологиях. Подайте заявку сейчас!