Ingénieur de données

#ournoneteam

Chez Kaizen, notre engagement envers la valeur inégalée des données guide chacune de nos décisions. En partant de notre solide architecture Lake House, nous envisageons une transition transformative vers une architecture de maillage de données. Cette approche met l'accent sur le traitement des données comme un produit avec des contrats bien définis, une propriété distribuée et une conception orientée domaine.

Alors que nous cherchons à améliorer davantage notre plateforme de données, nous nous concentrons vivement sur la démocratisation des données, la gouvernance et l'observabilité. Le scénario idéal ? Avoir chaque morceau de données parfaitement accessible, surveillé et gouverné.

Notre équipe de plateforme de données est bien préparée pour mener cette transition, championnant la conception et l'expansion des produits de données de nouvelle génération. En rejoignant notre équipage, vous ferez partie d'une initiative positionnant Kaizen à l'avant-garde de l'innovation basée sur les données.

#ournomission

Notre infrastructure Lake House a été un pilier fondamental, soutenant sans faille une cohorte diverse allant de la BI, la science des données et le ML à nos escouades de produits innovants. Alors que nous nous dirigeons vers la prochaine frontière caractérisée par les produits de données et les visions d'un paradigme de maillage de données, nous anticipons des résultats transformateurs. Au cœur de notre mission, nous nous efforçons d'assurer la stabilité de nos pipelines, la manœuvrabilité de notre infrastructure et la meticulosité de nos conceptions, tout en respectant les normes les plus élevées de gouvernance des données.

En embarquant sur cette trajectoire ambitieuse, nous sommes à la recherche d'ingénieurs de données bien versés dans le data ops, avec un sens aigu des meilleures pratiques d'ingénierie logicielle et une mentalité orientée produit. Un rôle clé pour notre équipe est de architecter et d'élaborer des outils utilitaires qui simplifient la complexité. Ce faisant, nous fournissons aux autres équipes des solutions prêtes à l'emploi, les soulageant des détails techniques et réduisant la charge cognitive.

Enrichissant davantage notre engagement, l'expertise historique de Kaizen en matière de calcul distribué. Ce dépôt de connaissances est prêt à être exploité, illustrant notre dévouement sans relâche à promouvoir une culture centrée sur les données dans toute l'entreprise.

#ournotechstack

Spark, Scala, Python, Azure Databricks, Delta, Apache Airflow, Azure DevOps, Terraform Grafana et plus encore

Responsabilités :

• Contribuer au développement d'une plateforme de données évolutive et sécurisée alignée sur le paradigme du Maillage de données ;
• Concevoir, mettre en œuvre et améliorer les outils et services de l'orchestration, de l'observabilité, de la gouvernance des données et de la qualité des données selon des normes d'ingénierie élevées
• Déployer et gérer nos produits en utilisant les meilleures pratiques de CI/CD en suivant la culture 'vous le construisez, vous le gérez'
• Rester à jour sur les technologies émergentes, les méthodologies et les meilleures pratiques de l'industrie, pour garantir une amélioration continue de la plateforme de données
• Favoriser une culture de documentation, où la documentation technique vit aux côtés de nos produits et garantit qu'ils sont faciles à utiliser et à maintenir

Exigences :

• Compétence Spark : Connaissances démontrées en Apache Spark, avec la capacité d'écrire et d'optimiser un code efficace pour les tâches de traitement des données.
• Ingénierie logicielle : Solide expérience en ingénierie logicielle, capable de concevoir, d'écrire et de déployer un code de production qui correspond à notre vision centrée sur les données.
• Expertise en pipeline de données : Expérience pratique avec les cadres d'orchestration de pipeline de données, garantissant un flux de données et une intégration fluides entre différentes sources et plateformes.
• Familiarité avec DevOps et DataOps : Expérience pratique en DevOps, avec une préférence pour les candidats familiers avec les pratiques de DataOps, garantissant une intégration continue, une livraison et des opérations de données efficaces.
• Solutions de données de bout en bout : Compétence dans la conception, la planification et la livraison de pipelines de données complets, de l'approvisionnement et l'ingestion au traitement et à la fourniture.
• Évaluation de la technologie : Une mentalité curieuse, avec la capacité de comprendre, d'évaluer et de potentiellement intégrer de nouvelles technologies qui peuvent faire avancer l'approche centrée sur les données de Kaizen.
• Gouvernance et sécurité des données : Comprendre l'importance de la gouvernance des données, avec un accent sur l'assurance que les actifs de données sont protégés, accessibles et conformes aux normes réglementaires.

En fonction du niveau de séniorité, toutes les compétences ci-dessus ne sont pas indispensables pour bien commencer dans le rôle. Nous recherchons des ingénieurs qui sont compétents dans un sous-ensemble de nos domaines et sont dédiés à l'amélioration continue. Soyez assurés qu'il y aura de nombreuses opportunités pour apprendre et grandir !