Rejoignez notre équipe en tant qu'Ingénieur de données intermédiaire chez k0deHut - Poste hybride à Sandton Jhb

Objectif du poste : Opportunité passionnante pour un Ingénieur de données qualifié de devenir un membre clé de notre équipe MLOps innovante chez k0deHut, où vous jouerez un rôle crucial dans l'avancement de nos applications métier critiques avec votre expertise en ingénierie des données. Chez k0deHut, vous aurez l'occasion de concevoir, mettre en œuvre et gérer des solutions de données complètes en collaboration avec une équipe d'experts dans divers domaines technologiques.

Principales responsabilités :

Développement de pipeline de données :

• Concevoir et maintenir des pipelines ETL pour le traitement des données par lots et en temps réel.
• Améliorer l'efficacité et la performance des pipelines existants.
• Diriger les efforts en matière de visualisation des données et de reporting.
• Architecturer des modifications de pipeline de données à l'aide d'outils avancés pour des projets actuariels et pilotés par l'IA.

Stack technologique :

• Développer en utilisant Python, SQL, Linux et le scripting shell.
• Utiliser Docker pour la gestion et l'orchestration des conteneurs.
• La connaissance de Spark et de l'environnement Linux sera très avantageuse.

Plateformes et outils :

• Opérer dans des environnements comme Azure Data Factory, dbt, Airflow et Databricks.
• Connaissance de Kafka, Spark Streaming et des bases de données relationnelles et NoSQL.
• L'expérience avec les bases de données en mémoire haute performance ajoutera de la valeur.

DevOps et Automatisation :

• Intégrer Azure DevOps pour des workflows rationalisés et une collaboration entre départements.
• Utiliser Terraform pour une gestion efficace de l'infrastructure.
• Maintenir une documentation rigoureuse des processus et des déploiements technologiques.

Collaboration :

• Travailler en étroite collaboration avec les data scientists, les actuaires, les ingénieurs logiciels pour répondre aux besoins en données.
• Conduire l'architecture de notre écosystème de données moderne pour l'apprentissage automatique.

Attributs et compétences personnels :

• Solide maîtrise de Python, SQL et Linux.
• Compréhension robuste des outils et plateformes de big data.
• Excellentes compétences en communication avec la capacité de travailler à travers des équipes fonctionnelles.
• Un fort accent mis sur l'apprentissage et la croissance personnelle.

Éducation et expérience :

• Un diplôme de Bachelor ou de Master en informatique, ingénierie, ou similaire.
• Au moins 3 ans d'expérience dans un rôle similaire.

Ceci est un poste hybride basé à Sandton Jhb, vous offrant la flexibilité de travailler partiellement à distance. Si vous êtes passionné par l'ingénierie des données et souhaitez avoir un impact significatif dans une entreprise tournée vers l'avenir, k0deHut est l'endroit pour vous. Postulez aujourd'hui et faites passer votre carrière au niveau