Ingénieur de données Azure/Databricks - Empower (à distance/basé au Costa Rica)

Description de l'entreprise

Présentation de l'entreprise

Hitachi Solutions est un intégrateur de solutions internationales passionné par la conception, le développement et la fourniture de solutions cloud innovantes pour aider nos clients à innover dans l'ensemble de leur activité. Notre entreprise développe les services commerciaux et la technologie qui alimentent certains des produits que vous utilisez tous les jours, et est étroitement alignée avec Microsoft et d'autres leaders de l'espace cloud.

Ce qui distingue Hitachi Solutions, c'est à la fois notre focus sur l'industrie et la propriété intellectuelle que nous apportons à nos clients. Reconnus pour nos réalisations année après année, nous nous efforçons d'être le conseiller de confiance des grandes et moyennes entreprises, les aidant à avancer rapidement pour atteindre leurs initiatives stratégiques grâce à une ingénierie distinguée, un travail acharné et de la compassion. Avec plus de 3 000 membres de l'équipe dans 14 pays, en 18 ans de concentration, notre entreprise a connu une croissance explosive et une grande satisfaction client. Cela nous a permis d'offrir des salaires exceptionnellement attrayants, une correspondance 401k, des congés familiaux et des avantages de santé. Et non, nous ne vous ferons pas venir à un bureau ou demander un emploi du temps de travail inflexible.

Faisant partie de Hitachi, Ltd., notre entreprise a une longue et riche histoire d'innovation, de solidité financière et de présence internationale comme l'une des plus grandes entreprises du monde. Depuis 1910, Hitachi, Ltd. est un leader dans la fabrication de produits innovants et de solutions qui soutiennent l'industrie et l'infrastructure sociale à travers le monde, soutenue par 303 000 employés dans plus de 100 pays et à travers 864 entreprises.

Équipe de développement de nouveaux produits et innovations

Ce poste dans notre entreprise est situé dans notre équipe de développement de nouveaux produits et d'innovations, formée en 2021. Rejoindre cette équipe représente une opportunité d'accélérer votre carrière et de travailler avec une équipe de collègues amusants et nerds dans une atmosphère perturbatrice: bien financée, focalisée sur l'hypercroissance, se déplaçant rapidement et faisant des erreurs dans la recherche de l'innovation et de l'ingénierie solide.

Armé d'une clientèle existante, d'une maison mère financière stable, le but de ce groupe est d'aider notre entreprise à introduire des produits pour améliorer notre solide activité de services, rendant finalement le cloud plus facile pour nos clients et nous permettant d'atteindre nos objectifs financiers à long terme avec une échelle supérieure à la linéarité.

Description du poste

Veuillez noter:Bien que notre position soit à distance / virtuelle / travail à domicile, vousDEVEZ résider et être autorisé à travailler, au Costa Rica.

INGÉNIEUR DE DONNÉES (DATABRICKS, PYTHON, SPARK)

Il s'agit d'un rôle à temps plein dans notre organisation de produits pour un ingénieur de données très expérimenté dans la conception de systèmes Big Data possédant des compétences en architecture de données, notamment des compétences sur les technologies Spark et Delta/Data Lake.

Les personnes à ce poste aideront au design, à la mise au point, à l'amélioration et à la maintenance de produits de pipelines de données complexes qui gèrent les opérations critiques de l'entreprise, et les pipelines d'analyse à grande échelle. Les candidats qualifiés auront démontré leur aptitude à apprendre rapidement de nouveaux concepts, auront une formation en ingénierie de données et/ou auront une expertise solide en ingénierie logicielle.

Responsabilités

• Définir le périmètre et exécuter ensemble avec le leadership de l'équipe. Travailler avec l'équipe pour comprendre les capacités de la plateforme et déterminer comment améliorer et développer ces capacités.
• Avoir une forte indépendance et autonomie.
• Participer à la conception, au développement, à l'amélioration et à l'entretien de produits de pipeline de données complexes qui gèrent des opérations critiques pour l'entreprise et des applications d'analyse à grande échelle.
• Avoir une expérience qui lui permet de diriger des ingénieurs de données de niveau moyen et senior.
• Soutenir les équipes d'analyse, de science des données et/ou d'ingénierie et comprendre leurs besoins et défis uniques.
• Inculquer l'excellence dans les processus, les méthodologies, les normes et les choix technologiques adoptés par l'équipe.
• Apprendre rapidement de nouveaux concepts pour être à l'écoute des technologies d'ingénierie de données en constante évolution.
• Consacrer du temps à l'apprentissage continu pour tenir au courant de leur équipe des derniers développements dans le domaine.
• s'engager à développer la maturité technique à travers l'entreprise.

Qualifications

• 5+ années d’expérience en ingénierie de données, dont 2+ années de conception et de construction de pipelines de données Databricks sont REQUISES ; expérience des services cloud Azure préférée, expérience AWS, GCP ou d'autres plateformes cloud considérées en remplacement
• Expérience avec la conception de bases de données conceptuelles, logiques et/ou physiques est FORTEMENT DÉSIRÉE
• 2+ années d'expérience pratique avec Python/Pyspark/SparkSQL sont REQUISES; l'expérience avec Scala est un plus
• 2+ années d'expérience avec les pipelines Big Data ou les outils DAG (Airflow, Dbt, Data Factory, ou similaire) sont REQUISES
• 2+ années d'expérience avec Spark (en particulier Databricks Spark et Delta Lake) sont REQUISES
• 2+ années d'expérience pratique dans la mise en œuvre de solutions Big Data dans un écosystème cloud, y compris Data/Delta Lakes, sont REQUISES
• 2+ années d'expérience avec le contrôle de source (git) en ligne de commande sont REQUISES
• 2+ années d'expérience en SQL, en particulier pour écrire des requêtes complexes et très optimisées sur de grands volumes de données sont TRÈS DÉSIRÉES
• Les compétences de modélisation/profilage de données solides avec la méthodologie Kimball/star schema sont TRÈS DÉSIRÉES
• Expérience professionnelle avec la technologie de streaming en temps réel Kafka ou autre HIGHLY DESIRED
• Expérience professionnelle avec les pipelines de déploiement de base de données (c'est-à-dire, dacpac's ou technologie similaire)HIGHLY DESIRED
• Experience professionnelle avec un ou plusieurs framework de tests unitaires ou de qualité de donnéesHIGHLY DESIRED

#LI-CA1

#À DISTANCE

#DATABRICKS

#SPARK

#DATALAKEHOUSE

#BIGDATA

#emploisauCostaRica

Informations complémentaires

Nous sommes un employeur offrant une égalité des chances. Tous les candidats seront considérés pour un poste sans égard à l'âge, la race, la couleur, la religion, le sexe, l'orientation sexuelle, l'identité de genre, l'origine nationale, le statut d'ancien combattant ou l'incapacité.