Ingénieur de données AWS/Apache/ETL

Job expired!

Bonjour et ravi que vous ayez décidé de tenter votre chance pour ce poste! Nous sommes nouveaux et nous sommes en pleine croissance, nous sommes une start-up IT en phase de lancement basée aux États-Unis et en Inde. Nous sommes Reveal Healthtech.

Nous sommes en mission pour aider à "révéler" le potentiel transformateur de la technologie dans la prestation des soins de santé. Nous voulons que des personnes passionnées comme vous nous rejoignent dans cette mission et utilisent la technologie de la manière la plus innovante possible pour répondre aux besoins de nos clients en s'associant à nous.

Lisez davantage pourquoi nous avons créé Reveal Healthtech sur notre site Web.

Si tout cela résonne en vous et que la construction d'une entreprise partant de zéro vous excite, continuez à lire la description de poste😎

Veuillez noter que il s'agit d'un poste hybride. #LI_Hybrid.

Exigences

Que cherchons-nous ?

Nous cherchons à recruter un ingénieur de données talentueux pour rejoindre notre équipe en pleine croissance. En tant qu'ingénieur de données, vous jouerez un rôle essentiel dans la conception, la mise en œuvre et la maintenance de notre infrastructure. Vous travaillerez de manière interfonctionnelle pour automatiser les processus, améliorer la fiabilité du système et faire évoluer notre plate-forme. Dans ce rôle, vous aurez l'occasion d'utiliser votre expertise technique pour nous aider à accomplir notre mission de collaborer avec nos clients et de répondre à leurs besoins de la manière la plus innovante possible.


Responsabilités

En tant qu'ingénieur de données responsable de la maintenance d'un lac de données, vos principales responsabilités incluront:

  1. Collecte de données : Vous aurez pour tâche de collecter et d'extraire les données provenant de multiples sources, telles que les bases de données, les API ou les fichiers, et de les charger dans le lac de données. Cela implique de comprendre les sources de données, de concevoir des pipelines d'ingestion de données, et d'assurer la qualité et l'intégrité des données durant le processus.
  2. Transformation et préparation des données : Une fois que les données sont dans le lac de données, vous devrez les transformer et les préparer pour l'analyse. Cela peut impliquer le nettoyage, le filtrage, l'agrégation ou la jointure de jeux de données pour créer un ensemble de données unifié et fiable qui peut être utilisé pour la génération de rapports et l'analyse.
  3. Modélisation des données et architecture : Vous serez responsable de la conception et de la mise en œuvre du schéma et de la structure du lac de données. Cela inclut la définition des tables de données, des partitions et l'optimisation des mécanismes de stockage pour une récupération et une analyse efficaces des données.
  4. Gouvernance et sécurité des données : La préservation de la confidentialité, la sécurité et la conformité des données sont des aspects critiques de votre rôle. Vous devrez établir et appliquer des politiques de gouvernance des données, mettre en place des contrôles d'accès et vous assurer que les données sont gérées conformément aux réglementations pertinentes et aux bonnes pratiques.
  5. Intégration Tableau : À l'aide de Tableau, vous créerez des visualisations interactives et des rapports basés sur les données du lac de données. Cela implique de créer des tableaux de bord, des graphiques et d'autres représentations visuelles pour permettre une exploration et une analyse efficaces des données par les utilisateurs finaux.
  6. Optimisation des performances : Vous devrez surveiller en continu et optimiser les performances des pipelines de données, le stockage du lac de données et les tableaux de bord Tableau. Cela peut impliquer le réglage des requêtes, l'indexation des données ou l'optimisation des classeurs Tableau pour assurer un accès efficient et rapide aux données.
  7. Collaboration et documentation : Une collaboration efficace avec d'autres équipes, telles que les scientifiques de données, les analystes ou les parties prenantes de l'entreprise, est cruciale. Vous devrez comprendre leurs exigences, fournir un soutien et documenter les pipelines de données, les transformations et les configurations de Tableau pour référence future.

Compétences et qualifications clés

  • Qualifications : Licence en informatique, ingénierie ou domaine connexe. Un master est un plus.
  • Expérience avérée en tant qu'ingénieur de données ou dans un poste similaire
  • Solides compétences en programmation dans des langages JVM tels que Java, Kotlin et/ou Scala, ainsi qu'en SQL et Python
  • Expérience avec les outils d'intégration de données et d'[ELT ou ETL] tels qu'Apache Spark, Airbyte, Meltano, Singer
  • Familiarité avec les cadres de traitement de gros volumes de données comme Apache Kafka, Apache Spark ou Apache Flink
  • Rigoureux en travaillant avec des bases de données relationnelles, des entrepôts de données, des lacs de données (Iceberg/S3 et Parquet), et des systèmes de stockage distribués
  • Connaissance de la modélisation de données, des concepts d'entreposage de données et de la modélisation dimensionnelle.


Comment vous nous enrichirez ?

  • Énergique et enthousiaste
  • Autonome et motivé
  • Doté d'un état d'esprit de croissance
  • Qui embrasse les défis
  • Le fait de construire de nouvelles choses vous stimule !
  • Curieux et profondément intéressé par le monde
  • Il remet en question le statu quo de manière constructive

Avantages

Qu'obtenez-vous en retour ?

  • Faire partie d'une équipe en pleine croissance/étonnante - Une belle opportunité de prendre part au démarrage d'une nouvelle entreprise technologique de l'âge des services et de l'ingénierie des produits dans un environnement à risque ajusté avec un potentiel énorme pour les membres initiaux.
  • La confiance plutôt que le contrôle - Nous croyons en des fondamentaux d'affaires solides et avons une vision d'ampleur dès le premier jour. Vraiment, les personnes sont nos plus grands gagnants et nous voulons nous assurer que votre plein potentiel est atteint dans l'emploi.
  • De nombreuses opportunités d'apprentissage sur le job et au-delà - Nous avons déjà une liste préparée de cours dans lesquels vous pouvez vous plonger!
  • Rémunération et avantages parmi les meilleurs de l'industrie

Prochaines étapes

  • Envoyez-nous votre CV à jour - si vous pouvez mentionner comment vous avez enrichi votre ancienne organisation dans une lettre de motivation, cela serait génial !
  • Si nous trouvons votre profil adéquat, notre personnel de talent entrera en contact avec vous pour comprendre votre profil/vos intérêts et voir comment nous pouvons nous aligner au mieux mutuellement.
  • Vous aurez deux tâches - un test de raisonnement basé sur ordinateur et une étude de cas technique suivie d'un entretien basé sur le poste dans les tours suivants.
  • Finalement, vous aurez une discussion avec notre fondateur pour en savoir plus sur nous et voir si c'est le bon prochain mouvement de carrière !