Software Engineer- Data (Big data and Data Pipelines)- Delhi (preferred)/ Bangalore

À propos de Findem

Findem est la seule plateforme de données sur les talents qui intègre des données 3D avec l'IA pour révolutionner votre écosystème de talents. En automatisant et consolidant le sourcing, le CRM et l'analytique, notre plateforme apporte des insights sans précédent sur le marché de l'emploi et vos concurrents. Alimenté par des données 3D, Findem offre des flux de travail automatisés tout au long du cycle de vie des talents, créant des expériences de talent supérieures et construisant des pipelines continus de candidats divers et de premier rang. En savoir plus à www.findem.ai.

Titre du poste : Ingénieur Big Data

Lieu : Delhi (préféré) / Bangalore. Les candidats doivent être basés à ces endroits ou prêts à s’y installer.

Mode de travail : Hybride - 3 jours sur site

3 - 7 ans

Rôle et responsabilités

• Développer et gérer des pipelines de données, des solutions de traitement de données massives et des infrastructures de lacs de données en utilisant diverses technologies Big Data et ETL.
• Assembler et traiter des ensembles de données volumineux et complexes pour répondre aux exigences commerciales.
• Effectuer des ETL à partir de diverses sources comme MongoDB, S3, Kafka, et traiter à l'aide des technologies SQL et Big Data.
• Développer des outils analytiques pour obtenir des insights exploitables sur l'acquisition de clients, l'efficacité opérationnelle et d'autres métriques cruciales.
• Créer des outils de requête auto-service interactifs et ad-hoc pour des cas d'utilisation analytique.
• Construire des modèles et des schémas de données pour la performance, la scalabilité, et les exigences fonctionnelles.
• Établir des processus pour la transformation des données, les métadonnées, la gestion des dépendances et des flux de travail.
• Rechercher, expérimenter et prototyper de nouveaux outils/technologies pour une mise en œuvre réussie.

Compétences indispensables

• Forte expertise en Python/Scala.
• Expérience avec des technologies Big Data telles que Spark, Hadoop, Athena/Presto, Redshift, Kafka.
• Connaissance des formats de fichiers comme Parquet, JSON, Avro, ORC.
• Expérience avec des outils de gestion des flux de travail comme Airflow.
• Familiarité avec le traitement par lots, le streaming et les files de messages.
• Expérience avec des outils de visualisation comme Redash, Tableau, Kibana.
• Excellentes compétences en résolution de problèmes.

Compétences appréciées

• Exposition aux bases de données NoSQL comme MongoDB.
• Expérience avec des plates-formes cloud comme AWS, GCP.
• Connaissance de l'architecture des microservices.
• Exposition aux techniques d'apprentissage automatique.

Ce poste est à plein temps et comprend des avantages sociaux complets. Notre siège mondial est situé dans la région de la baie de San Francisco, avec notre siège en Inde à Bengaluru.

Employeur garantissant l'égalité

En tant qu'employeur garantissant l'égalité des chances, Findem ne pratique aucune discrimination basée sur la race, la couleur, la religion, l'origine nationale, l'âge, le sexe (y compris la grossesse), le handicap physique ou mental, l'état de santé, les informations génétiques, l'identité ou l'expression de genre, l'orientation sexuelle, l'état matrimonial, le statut de vétéran protégé, ou toute autre caractéristique protégée légalement.

Informations supplémentaires : Nom de l'entreprise : Findem

Titre du poste : Ingénieur Big Data - Pipelines de Données

Lieu : Delhi (préféré) / Bangalore

Re