Sr Data Engineer

KPMG India - Offre d'emploi Senior Data Engineer

Compétences obligatoires

Nous recherchons un Senior Data Engineer hautement qualifié avec une expertise en Azure pour rejoindre notre équipe. Le candidat idéal doit posséder les compétences suivantes :

• Au moins 7 ans d'expérience en conseil ou en prestation de services clients sur Azure.
• Minimum de 4 ans de développement de pipelines d'ingestion de données, de traitement de données et analytiques pour les big data, MySQL et Snowflake.
• Expérience étendue avec les services natifs d'Azure et Hadoop.
• Expérience pratique dans la mise en œuvre de l'ingestion de données, de l'ETL et du traitement de données en utilisant les services Azure comme ADLS, Azure Data Factory, Azure Functions, Synapse/DW, Azure SQL DB, Event Hub, IOT Hub, Azure Stream Analytics, Azure Analysis Service, HDInsight, Databricks, Azure Data Catalog, et Cosmo DB, entre autres.
• Au moins 3 ans d'expérience avec Azure et les technologies Big Data telles que Python, SQL, ADLS/Blob, Spark/SparkSQL, Databricks, Hive, Kafka, EventHub, et NiFi.
• Maîtrise du développement Pyspark sur Databricks.
• Excellente compréhension de DevSecOps et des déploiements CI/CD.
• Familiarité avec les méthodologies et outils de migration vers le cloud comme Azure Data Factory, Data Migration Service, Event Hub, Kafka.
• Minimum de 3 ans d'expérience avec les SGBDR.
• Expérience avec les formats de fichiers Big Data et les techniques de compression.
• Expertise avec les outils de développement tels que Azure DevOps, Visual Studio Team Server, Git, et Jenkins.
• Expérience avec les architectures de cloud privé et public, y compris les avantages/inconvénients et les considérations de migration.
• Licence ou diplôme supérieur en informatique ou dans une discipline connexe (minimum 2 ans d'expérience de travail) ou équivalent.

Rôles et responsabilités principaux

En tant que Senior Data Engineer chez KPMG India, vous serez responsable de :

• Concevoir, construire et maintenir l'infrastructure de données en utilisant les services cloud Azure.
• Créer des pipelines de données, intégrer des données de diverses sources et mettre en œuvre des mesures de sécurité et de confidentialité des données.
• Surveiller, dépanner les flux de données, et optimiser le stockage et le traitement des données pour la performance et l'efficacité des coûts.

Compétences préférées

Bien que non obligatoires, les compétences suivantes sont fortement préférées :

• Expertise en DevOps sur une plateforme Azure.
• Expérience de développement et de déploiement de solutions ETL sur Azure.
• Connaissance de l'IoT, des services événementiels, des microservices et des conteneurs/Kubernetes dans le cloud.
• Familiarité avec les technologies de gestion des métadonnées telles que la gouvernance des données, la qualité des données, la MDM, la traçabilité, et le catalogue de données.
• Connaissance des piles de gestion des données, d'ingestion, de capture, de traitement, et de conservation comme Kafka, StreamSets, Attunity, GoldenGate, Map Reduce, Hadoop, Hive, Hbase, Cassandra, Spark, Flume, Hive, et Impala.
• Expérience multi-cloud, y compris Azure, AWS et Google, est un plus.

Rejoignez KPMG India en tant que Senior Data Engineer et faites partie d'une équipe qui stimule l'innovation dans la gestion des données et la technologie cloud. Postulez maintenant !