O Pinterest é uma plataforma de descoberta visual onde as pessoas encontram inspiração, salvam ideias e as organizam em torno de interesses, projetos e compras. Sua experiência combina recomendações personalizadas e busca visual sobre temas como decoração, moda, receitas e eventos, além de ajudar criadores e varejistas a alcançar seus públicos por meio de ferramentas de comércio e publicidade.
Engenheiro(a) de Software Senior Staff, Plataforma de IA - Palo Alto Híbrido
Lidere a estratégia, a arquitetura e a adoção da plataforma de avaliação de IA e machine learning do Pinterest. Ajude a estabelecer práticas confiáveis de avaliação para experiências de IA generativa em toda a empresa.
Descrição
- Identificar oportunidades de modernização e ampliar o roadmap de um sistema de avaliação para toda a empresa com liderança técnica
- Definir a direção técnica entre áreas, alinhar equipes parceiras e aumentar a adoção de recursos compartilhados de avaliação
- Tomar decisões arquiteturais de longo prazo que fortaleçam a experiência do usuário e a confiabilidade da plataforma de avaliação de IA e machine learning do Pinterest
- Desenvolver métodos e padrões de avaliação que combinem métricas automatizadas, revisão especializada, feedback humano, segurança e resultados de negócio
- Liderar iniciativas complexas entre equipes, gerenciar compensações técnicas e riscos e gerar impacto mensurável
- Evoluir a plataforma de avaliação de IA e machine learning do Pinterest para um sistema unificado e confiável, utilizado em toda a empresa
- Trabalhar com as equipes de engenharia, pesquisa, produto e segurança para melhorar a qualidade, as decisões de lançamento e a confiança em experiências baseadas em IA
Requisitos
- Pelo menos 3 anos de experiência prática projetando e operando sistemas de avaliação para IA generativa e sistemas complexos de machine learning
- Experiência criando benchmarks e conjuntos de dados de referência, aplicando métricas automatizadas e avaliação humana, usando avaliação baseada em modelos e analisando falhas
- Grande domínio de Python
- Conhecimento prático dos princípios de sistemas distribuídos
- Capacidade de iterar com eficiência usando ferramentas de IA durante a programação e o design de sistemas
- Amplo conhecimento de bibliotecas e frameworks de avaliação de IA generativa e sistemas de recomendação, incluindo AutoEvals, OpenEvals e Ragas
- Pelo menos 5 anos de experiência desenvolvendo plataformas escaláveis para experimentação distribuída, versionamento de dados e modelos, orquestração, observabilidade, gerenciamento de lançamentos e monitoramento em produção
- Bom discernimento em relação a riscos de IA generativa, como robustez, viés, privacidade, segurança e limitações dos sinais de avaliação automatizada
- Bacharelado em ciência da computação, engenharia ou área relacionada, ou experiência equivalente
Benefícios
- Elegibilidade para participação acionária
- Modelo de trabalho PinFlex flexível
- Colaboração presencial uma ou duas vezes por trimestre
- Ambiente de trabalho com igualdade de oportunidades
- Suporte para adaptações médicas ou religiosas durante o processo de candidatura