Senior/Staff Software Engineer, AI Infrastructure

À propos de SmartNews

SmartNews se positionne comme un leader mondial dans la redéfinition de la découverte de l'information et des nouvelles. Notre mission est de fournir aux utilisateurs des informations précises et opportunes tout en soutenant un journalisme de qualité. Nous combinons notre technologie unique d'apprentissage automatique avec l'expertise de notre équipe éditoriale de haut niveau pour livrer des nouvelles qui comptent pour des millions d'utilisateurs, en collaboration avec plus de 3 000 partenaires de publication mondiaux. Fondée en 2012 à Tokyo, Japon, SmartNews opère désormais des bureaux à Tokyo, San Francisco, Palo Alto, New York et Singapour.

Notre équipe d'Infrastructure IA est à la pointe du développement d'une infrastructure avancée et d'outils pour l'ingénierie des fonctionnalités, l'entraînement distribué, l'AutoML, les services d'inférence et l'infrastructure LLM. Nous assurons l'évolutivité et la performance en temps réel pour des milliards d'utilisateurs.

Dans ce rôle, vous allez :

• Définir la direction technique pour des domaines cruciaux au sein de l'équipe d'Infrastructure IA, en collaborant étroitement avec les équipes de Classement, de Compréhension du Contenu et d'autres équipes d'apprentissage automatique.
• Diriger la conception et la mise en œuvre des systèmes de plateforme IA principaux, y compris les plateformes d'ingénierie des fonctionnalités, l'entraînement distribué et les services d'inférence hautement évolutifs.
• Collaborer au sein de l'équipe, résoudre les problèmes liés aux dépendances et aux équipes clientes pour livrer avec succès les projets d'Infrastructure IA.
• S'attaquer aux problèmes les plus complexes au sein de l'équipe.

Expérience requise :

• Plus de 5 ans d'expérience dans l'architecture, le développement et la livraison de produits logiciels à grande échelle.
• Plus de 2 ans d'expérience dans les infrastructures/plateformes IA.
• Compétences expertes en codage dans plusieurs langages de programmation (par exemple, Java, C++, Python, Scala).
• Expérience avec Hive, Airflow, Scylla, Redis, Elasticsearch.
• Expérience en développement Spark, Hadoop, Flink, ClickHouse, Presto/Trino.
• Expérience dans le traitement des données liées aux applications ou aux sites web.
• Capacité à simplifier des problèmes complexes et à trouver des solutions créatives.
• Compréhension approfondie de bout en bout des systèmes distribués sophistiqués avec détection proactive des problèmes et mise en œuvre d'améliorations.
• Fortes compétences en leadership, définissant un exemple d'excellence en ingénierie pour l'équipe.
• Épanouissement dans un environnement dynamique avec des objectifs et des exigences changeants.
• Compréhension solide des algorithmes d'apprentissage automatique à grande échelle et un historique prouvé de construction d'infrastructure de soutien.
• Excellentes compétences en communication écrite et orale pour le travail d'équipe interfonctionnel.
• MS ou BS en informatique, mathématiques, physique ou autres domaines quantitatifs.

Points forts :

• Expérience dans le développement de systèmes de ranking/recommandation/recherche.
• Expertise dans l'analyse d'échec et le réglage des performances des opérations JVM.

Avantages

Avantages et privilèges du bureau de SmartNews à Tokyo :

• Déjeuner et