Ingénieur de données Azure/Databricks - Empower (télétravail/basé au Canada)

Description de l'entreprise

Présentation de l'entreprise

Hitachi Solutions est un intégrateur de solutions mondiales passionné par la conception, le développement et la livraison de solutions cloud de pointe pour aider nos clients à innover dans l'ensemble de leur entreprise. Notre entreprise développe les services commerciaux et les technologies qui alimentent certains des produits que vous utilisez tous les jours - et est étroitement alignée avec Microsoft et d'autres leaders de l'espace de cloud computing.

Ce qui distingue Hitachi Solutions, c'est à la fois notre focalisation sur l'industrie, et la propriété intellectuelle que nous apportons à nos clients. Reconnus pour nos réalisations année après année, nous nous efforçons d'être le conseiller de confiance des grandes et moyennes entreprises - les aidant à avancer rapidement pour atteindre leurs initiatives stratégiques commerciales avec un ingénierie de pointe, un travail acharné, et de la compassion. Avec plus de 3 000 membres d'équipe dans 14 pays, en 18 ans de focalisation notre entreprise a connu une croissance explosive et une grande satisfaction client. Cela nous a permis d'offrir des salaires exceptionnellement attractifs, une correspondance 401k, un congé familial, et des avantages de santé. Et non - nous ne vous ferons pas venir au bureau ou demander un horaire de travail inflexible.

Faisant partie de Hitachi, Ltd., notre entreprise a une longue et riche histoire d'innovation, de solidité financière, et de présence internationale de l'une des plus grandes entreprises mondiales. Depuis 1910, Hitachi, Ltd. est un leader dans la fabrication de produits innovants et de solutions qui soutiennent l'industrie et l'infrastructure sociale à travers le globe soutenus par 303 000 employés dans plus de 100 pays et à travers 864 entreprises.

Équipe de développement de nouveaux produits et d'innovations

Ce poste dans notre entreprise est situé dans notre équipe de développement de nouveaux produits et d'innovations créée en 2021. Rejoindre cette équipe représente une occasion d'accélérer votre carrière et de travailler avec une équipe de collègues amusants et nerds dans une atmosphère perturbatrice: bien financée, concentrée sur l'hyper croissance, se déplaçant rapidement, et faisant des erreurs dans le but de l'innovation et du bon ingénierie.

Armé d'un portefeuille de clients existant, et d'un parent financier stable - le but de ce groupe est d'aider notre entreprise à introduire des produits pour améliorer notre solide activité de services - rendant finalement le cloud plus facile pour nos clients, et nous permettant d'atteindre nos objectifs financiers à long terme avec une échelle supérieure à la linéaire.

Description du poste

Veuillez noter :Bien que notre poste soit à distance / virtuel / travail à domicile, vousDEVEZ résider, et être autorisé à travailler, au Canada

INGÉNIEUR DE DONNÉES (DATABRICKS, PYTHON, SPARK)

Il s'agit d'un poste à temps plein dans notre organisation de produits pour un ingénieur de données très expérimenté dans la conception de systèmes Big Data avec des compétences en architecture de données, en particulier la technologie Spark et Delta/Data Lake.

Les individus dans ce rôle aideront à la conception, au développement, à l'amélioration, et à la maintenance de produits de pipelines de données complexes qui gèrent des opérations critiques pour l'entreprise, et des pipelines d'analyse à grande échelle. Les candidats qualifiés auront une capacité démontrée à apprendre de nouveaux concepts rapidement, auront un fond d'ingénierie des données, et/ou auront une expertise robuste en ingénierie logicielle.

Responsabilités

• Portée et exécution conjointe avec le leadership de l'équipe. Travailler avec l'équipe pour comprendre les capacités de la plateforme et comment les améliorer et les étendre.
• Forte indépendance et autonomie.
• Conception, développement, amélioration, et maintenance de produits de pipelines de données complexes qui gèrent des opérations critiques pour l'entreprise et des applications d'analyse à grande échelle.
• Expérience de direction d'ingénieurs de données de niveau intermédiaire et supérieur.
• Soutenir les équipes d'analyse, de science des données et/ou d'ingénierie et comprendre leurs besoins et défis uniques.
• Inculquer l'excellence dans les processus, les méthodologies, les normes, et les choix technologiques adoptés par l'équipe.
• Adopter rapidement de nouveaux concepts pour suivre l'évolution rapide de la technologie d'ingénierie des données.
• Consacrer du temps à l'apprentissage continu pour tenir l'équipe au courant des derniers développements dans l'espace.
• Engagement à développer la maturité technique dans toute l'entreprise.

Qualifications

• 5+ années d'expérience en Ingénierie de Données dont 2+ années de conception et de construction de pipelines de données Databricks sont REQUISES; expérience du cloud Azure préféré, une expérience AWS, GCP ou d'autres plateformes de cloud sera prise en compte
• L'expérience des conceptions de bases de données conceptuelles, logiques et/ou physiques est TRÈS DÉSIRÉE
• 2+ années d'expérience pratique en Python/Pyspark/SparkSQL sont REQUISES; l'expérience avec Scala est un plus
• 2+ années d'expérience avec Big Data pipelines ou DAG Tools (Airflow, Dbt, Data Factory, ou similaire) sont REQUISES
• 2+ années d'expérience avec Spark (en particulier Databricks Spark et Delta Lake) sont REQUISES
• 2+ années d'expérience pratique dans la mise en œuvre de solutions Big Data dans un écosystème de cloud, y compris Data/Delta Lakes, sont REQUISES
• 2+ années d'expérience avec le contrôle de source (git) en ligne de commande sont REQUISES
• 2+ années d'expérience en SQL, spécifiquement pour écrire des requêtes complexes, hautement optimisées sur de grands volumes de données sont TRÈS DÉSIRÉES
• Fortes capacités de modélisation/profilage de données avec la méthodologie Kimball/star schema sont TRÈS DÉSIRÉES
• L'expérience professionnelle avec Kafka ou d'autres technologies de diffusion en direct est TRÈS DÉSIRÉE
• L'expérience professionnelle avec les pipelines de déploiement de bases de données (c'est-à-dire, dacpac’s ou une technologie similaire) est TRÈS DÉSIRÉE
• L'expérience professionnelle avec un ou plusieurs cadres de tests unitaires ou de qualité des données est TRÈS DÉSIRÉE

#LI-CA1

#ÀDISTANCE

#DATABRICKS

#SPARK

#DATALAKEHOUSE

#BIGDATA

Informations supplémentaires

Nous sommes un employeur qui offre l'égalité des chances. Tous les candidats seront considérés pour l'emploi sans regard pour l'âge, la race, la couleur, la religion, le sexe, l'orientation sexuelle, l'identité de genre, l'origine nationale, le statut de vétéran ou le statut d'handicap.