À propos du rôle
En tant qu'Ingénieur de données / Développeur d'entrepôts de données chez Crusoe Energy, vous dirigerez le développement et la gestion de notre infrastructure d'analyse de données, de notre lac de données et de notre entrepôt de données. Vous serez responsable de prendre des décisions cruciales concernant les technologies de base de données, l'architecture des pipelines de données, et de garantir la disponibilité et la précision des données à des fins d'analyse.
Responsabilités clés
Architecture de base de données : Évaluez, sélectionnez et mettez en œuvre les technologies de base de données les plus appropriées pour nos besoins de stockage, de traitement et d'analyse de données, y compris, mais sans s'y limiter, Postgres, InfluxDB, VictoriaMetrics, Prometheus et BigQuery.
Développement du pipeline de données : Dirigez la conception et le développement de pipelines de données efficaces et robustes à l'aide d'outils tels que dbt et Apache Airflow. Assurez le bon déroulement des flux de données des systèmes sources vers le lac de données et l'entrepôt de données.
Lac de données et entrepôt de données : Supervisez le développement et la maintenance de notre lac de données et de notre entrepôt de données, en garantissant la scalabilité, la sécurité et les performances. Mettez en œuvre les meilleures pratiques pour la modélisation des données.
Définition des mesures : Collaborez avec les parties prenantes de l'entreprise pour définir et documenter les principales mesures et KPIs qui orienteront la prise de décision dans toute l'organisation. Construisez et maintenez des tableaux de bord complexes dans Grafana (ou un logiciel similaire) pour mesurer et rendre compte des performances.
Assurance qualité des données : Mettez en place des contrôles de qualité des données et des processus de réconciliation/validation pour garantir la précision et la fiabilité des données stockées dans le lac de données et l'entrepôt de données.
Optimisation des performances : Surveillez continuellement et optimisez les performances des pipelines de données et des bases de données pour répondre aux besoins de l'entreprise et maintenir une haute disponibilité.
Collaboration en équipe : Travaillez en étroite collaboration avec des équipes interfonctionnelles, y compris des analystes de données, des data scientists et des ingénieurs logiciels, pour comprendre leurs besoins en données et garantir que les données sont facilement accessibles.
Documentation : Maintenez une documentation complète de l'architecture des données, des pipelines de données et des meilleures pratiques pour garantir le partage des connaissances au sein de l'organisation.
Ce rôle vous conviendra si vous avez
Un diplôme de licence en informatique, en ingénierie des données ou dans un domaine connexe, ou 5-8+ années d'expérience professionnelle pertinente.
Plusieurs années d'expérience pertinente en ingénierie des données, développement d'entrepôts de données ou dans un rôle similaire.
Une familiarité avec une variété de technologies de base de données et une maîtrise experte d'une ou plusieurs d'entre elles : Postgres, VictoriaMetrics, InfluxDB, Prometheus, BigQuery.
Maitrise des outils courants d'analyse de données et de visualisation tels que Grafana ou Looker.
Maîtrise des outils d'orchestration de pipeline de données tels que dbt ou Apache Airflow.
Une excellente compréhension des processus ELT/ETL et des techniques d'intégration de données.
Une solide compréhension de la conception de l'infrastructure de données, y compris les compromis en termes de performances et de finances de diverses conceptions.
Excellentes compétences en communication.
Capacité à travailler de manière indépendante et à diriger une petite équipe si nécessaire.
L'expérience de travail dans un environnement Agile ou Scrum est un plus.
Incarner les valeurs de l'entreprise.
Avantages :
o Horaires de travail hybrides
o Salaire compétitif dans l'industrie
o Parts de stock dans une entreprise en pleine croissance et bien financée
o Options pack assurance santé qui inclut HDHP et PPO, vision et soins dentaires pour vous et vos dépendants
o Congé parental payé
o Assurance vie payée, invalidité à court terme et à long terme
o Teladoc
o Bureaux acceptant les animaux de compagnie
o 401(k) avec une correspondance à 100% jusqu'à 4% du salaire
o Temps libre illimité
o Remboursement des frais de téléphone portable
o Remboursement des frais de scolarité
o Abonnement à l'application Calm
o Avantages pour les déplacements professionnels payés par l'entreprise ; $100 par mois
Fourchette de rémunération :
La fourchette de salaire est comprise entre $155 000 et $210 000. Les Unités de Stockage Restreintes sont incluses dans toutes les offres. Le salaire sera déterminé par l'éducation, l'expérience, les connaissances, les compétences et les capacités du candidat, ainsi que par l'équité interne et l'alignement avec les données du marché.
Crusoe Energy est un employeur qui souscrit au principe de l'égalité des chances. Les décisions d'emploi sont prises sans égard à la race, la couleur, la religion, l'incapacité, l'information génétique, la grossesse, la citoyenneté, l'état civil, le sexe, l'orientation sexuelle, l'identité de genre, l'âge, le statut de vétéran, l'origine nationale, ou tout autre statut protégé par la loi ou la réglementation.