Pinterest est une plateforme de découverte visuelle où les utilisateurs trouvent de l’inspiration, enregistrent des idées et les organisent autour de leurs centres d’intérêt, de leurs projets et de leurs achats. Son expérience associe des recommandations personnalisées et une recherche visuelle sur des sujets comme la décoration intérieure, la mode, les recettes et les événements, tout en aidant les créateurs et les détaillants à toucher leur audience grâce à des outils de commerce et de publicité.
Ingénieur logiciel Senior Staff, plateforme d’IA - Palo Alto hybride
Pilotez la stratégie, l’architecture et l’adoption de la plateforme d’évaluation de l’IA et de l’apprentissage automatique de Pinterest. Contribuez à établir des pratiques d’évaluation fiables pour les expériences d’IA générative dans toute l’entreprise.
Description
- Identifier les possibilités de modernisation et élargir la feuille de route d’un système d’évaluation à l’échelle de l’entreprise grâce à un leadership technique
- Définir l’orientation technique interfonctionnelle, aligner les équipes partenaires et accroître l’adoption de capacités d’évaluation partagées
- Prendre des décisions architecturales à long terme qui renforcent l’expérience utilisateur et la fiabilité de la plateforme d’évaluation de l’IA et de l’apprentissage automatique de Pinterest
- Développer des méthodes et des normes d’évaluation combinant métriques automatisées, revue d’experts, retours humains, sécurité et résultats commerciaux
- Piloter des initiatives complexes entre équipes, gérer les compromis techniques et les risques, et produire un impact mesurable
- Faire évoluer la plateforme d’évaluation de l’IA et de l’apprentissage automatique de Pinterest vers un système unifié et fiable utilisé dans toute l’entreprise
- Collaborer avec les équipes d’ingénierie, de recherche, de produit et de sécurité pour améliorer la qualité, les décisions de lancement et la confiance dans les expériences alimentées par l’IA
Exigences
- Au moins 3 ans d’expérience pratique dans la conception et l’exploitation de systèmes d’évaluation pour l’IA générative et les systèmes complexes d’apprentissage automatique
- Expérience dans la création de benchmarks et de jeux de données de référence, l’application de métriques automatisées et d’évaluations humaines, l’utilisation d’évaluations fondées sur des modèles et l’analyse des défaillances
- Maîtrise solide de Python
- Bonne connaissance pratique des principes des systèmes distribués
- Capacité à itérer efficacement avec des outils d’IA lors du codage et de la conception de systèmes
- Connaissance approfondie des bibliothèques et frameworks d’évaluation de l’IA générative et des systèmes de recommandation, notamment AutoEvals, OpenEvals et Ragas
- Au moins 5 ans d’expérience dans le développement de plateformes évolutives pour l’expérimentation distribuée, le versionnage des données et des modèles, l’orchestration, l’observabilité, la gestion des mises en production et la surveillance en production
- Bon jugement concernant les risques liés à l’IA générative, tels que la robustesse, les biais, la confidentialité, la sécurité et les limites des signaux d’évaluation automatisés
- Diplôme de licence en informatique, en ingénierie ou dans une discipline connexe, ou expérience équivalente
Avantages
- Éligibilité à une participation au capital
- Modèle de travail flexible PinFlex
- Collaboration en présentiel une ou deux fois par trimestre
- Environnement de travail garantissant l’égalité des chances
- Aide pour les aménagements médicaux ou religieux pendant le processus de candidature