Azure Databricks Engineer

Niveau d'expérience : 5-7 ans

Entreprise : PradeepIT Consulting Services Pvt Ltd

PradeepIT Consulting Services Pvt Ltd recherche un Ingénieur de données senior talentueux et expérimenté pour rejoindre notre équipe innovante. Le candidat retenu possédera un ensemble de compétences solides en ingénierie des données, y compris une expertise en Azure Databricks, Pyspark, Medallion Architecture et Data Lakes.

• Concevoir, développer et optimiser des pipelines de données en utilisant Azure Databricks et Pyspark.
• Mettre en œuvre et maintenir la Medallion Architecture pour rationaliser les flux de traitement des données.
• Gérer et organiser de grands ensembles de données dans les Data Lakes, en garantissant la qualité et l'intégrité des données.
• Écrire des requêtes SQL complexes pour extraire, transformer et charger des données provenant de diverses sources.
• Collaborer avec des data scientists, des analystes et d'autres parties prenantes pour comprendre les besoins en données et fournir des solutions de données efficaces.
• Surveiller et résoudre les problèmes de performance des pipelines de données dès qu'ils surviennent.
• Se tenir au courant des dernières avancées en ingénierie des données et proposer des solutions innovantes pour améliorer les processus de données.

• 5-7 ans d'expérience pratique en ingénierie des données ou dans un domaine connexe.
• Maîtrise d'Azure Databricks et de Pyspark.
• Forte compréhension de la Medallion Architecture et de sa mise en œuvre.
• Expérience de travail avec les Data Lakes et de la gestion de grands ensembles de données.
• Compétences avancées en SQL avec la capacité d'écrire et d'optimiser des requêtes complexes.
• Connaissance des services Azure et des solutions de données basées sur le cloud.
• Compétences solides en résolution de problèmes et attention aux détails.
• Excellentes capacités de communication et de collaboration.

Chez PradeepIT Consulting Services Pvt Ltd, nous nous engageons à exploiter la puissance des données pour proposer des solutions innovantes. Si vous êtes passionné par le travail avec de grands ensembles de données et que vous aimez développer des solutions de données de pointe, nous vous encourageons à postuler à cette opportunité excitante.

Candidats intéressés, veuillez soumettre votre candidature avec un CV détaillé. Nous attendons avec impatience d'accueillir un nouveau membre dans notre équipe !