Ingénieur Technique Solutions Spark

Bien que les candidats dans les lieux indiqués soient encouragés pour ce rôle, nous sommes ouverts aux candidats distants dans d'autres lieux.

En tant qu'ingénieur technico-commercial Spark, vous apporterez des solutions techniques et de conseil pour les problèmes relevant du domaine de Spark/ML/AI/Delta/Streaming/Lakehouse signalés par nos clients et ainsi résoudre tout défi concernant la plateforme d'analytique unifiée Databricks avec vos compétences techniques et relationnelles. Vous assisterez nos clients dans leur parcours Databricks et leur apporterez les conseils et l'expertise nécessaires pour obtenir de la valeur et atteindre leurs objectifs stratégiques grâce à nos produits.

L'impact que vous aurez :

• Fournir une analyse et un dépannage de niveau initial des problèmes de Spark en utilisant des métriques de l'interface utilisateur de Spark, DAG, Event Logs pour divers problèmes de lenteur de travail signalés par les clients.
• Dépanner, résoudre et suggérer une analyse approfondie du code source de Spark pour résoudre les problèmes des clients liés aux fonctions internes de Spark, aux fonctions SQL de Spark, au Streaming structuré, à Delta, à Lakehouse et à d'autres fonctionnalités de la version Databricks.
• Aider les clients à mettre en place des problèmes de Spark reproductibles avec des solutions en Spark SQL, Delta, gestion de la mémoire, tuning de performance, streaming, data science, intégration de données dans Spark.
• Participer au programme d'ingénieur solutions désigné et guider un ou deux des problèmes quotidiens de Spark et de Cloud de nos clients stratégiques.
• Planifier avec les Account Executives, les ingénieurs Success Clients et les Architectes Solution Résidents pour coordonner les problèmes des clients et les meilleures pratiques.
• Participer à des réunions en partage d'écran, répondre à des conversations sur le canal Slack avec nos parties prenantes internes et nos clients, aider à résoudre les principaux problèmes de Spark au niveau individuel.
• Créer une base de connaissance interne, avec de la documentation technique, des manuels pour l'équipe de soutien et les clients. Aider à créer et à maintenir la documentation de la compagnie et les articles de la base de connaissances.
• Coordonner avec les équipes d'ingénierie et de soutien de second niveau pour aider à identifier et signaler les défauts du produit.
• Participer à la rotation des appels de service le week-end et en semaine et gérer les escalades lors des arrêts du runtime de Databricks, des situations d'incident, planifier les activités du jour 2 et assurer un niveau de support plus élevé pour les problèmes opérationnels critiques des clients.
• Fournir des conseils sur les bonnes pratiques en matière de performance et d'utilisation des libraries core de Spark et des APIs pour les solutions personnalisées développées par les clients de Databricks.
• Être un vrai défenseur de la cause des clients.
• Contribuer au développement d'outils /d'initiatives d'automatisation.
• Fournir un support de premier niveau pour les intégrations de tierces parties avec l'environnement Databricks.
• Revoir les tickets JIRA d'ingénierie et informer proactivement l'équipe de direction du support pour suivre les items d'action.
• Gérer les cas de Spark attribués quotidiennement et respecter les SLA's engagés.
• Surpasser les attentes de l'organisation de soutien en termes de KPI.
• Renforcer votre expertise sur AWS/Azure et la plateforme Databricks grâce à l'apprentissage continu et aux programmes de formation internes.

Recherchons :

• Minimum 6 années d'expérience dans la conception, le développement, le test et la maintenance des applications basées sur Python/Java/Scala dans des environnements typiques de livraison de projets et de consulting.
• 3 ans d'expérience pratique dans la mise en œuvre de deux ou plus des cas d'utilisation industriels liés à Big Data, Hadoop, Spark, Machine Learning, Intelligence Artificielle, Streaming, Kafka, Data Science, ElasticSearch à l'échelle de la production. Une expérience avec Spark est obligatoire.
• Expérience pratique dans le tuning/troubleshooting des applications basées sur Hive et Spark à l'échelle de la production.
• Une expérience réelle en JVM et techniques de gestion de la mémoire telles que les collectes de déchets, l'analyse de heap/thread dump.
• Expérience pratique avec toute base de données basée sur SQL, technologies de Data Warehousing/ETL comme Informatica, DataStage, Oracle, Teradata, SQL Server, MySQL et cas d'utilisation de type SCD est préférée.
• Expérience pratique avec AWS ou Azure ou GCP est préférée.
• Compétences en administration de Linux/Unix est un plus.
• Connaissance pratique en Data Lakes et de préférence sur les cas d'utilisation du type SCD à l'échelle de production.
• Capacités démontrées d'analyse et de résolution des problèmes, en particulier celles qui s'appliquent à un environnement "Distributed Big Data Computing".

Les avantages

• Assurance Médicale, dentaire et de vision
• Plan 401(k)
• Plans FSA, HSA et Avantages du plan Transports
• Attributions d'équité
• Temps libre flexible
• Congé parental payé
• Planification familiale
• Remboursement de fitness
• Fonds annuel de développement de carrière
• Remboursement de home office/casque de travail
• Programme d'aide aux employés (EAP)
• Assurance Accident de voyage d'affaires
• Ressources pour le bien-être mental