LogoFresh Jobs Ahead
Pinterest
Pinterest
1 001 – 5 000 Anställda
Sponsor för H1B-visumB2CMedia
Pinterest är en visuell upptäcktsplattform där människor hittar inspiration, sparar idéer och organiserar dem utifrån intressen, projekt och köp. Tjänsten kombinerar personliga rekommendationer och visuell sökning inom områden som heminredning, mode, recept och evenemang, samtidigt som den hjälper kreatörer och återförsäljare att nå målgrupper genom handelsverktyg och annonsering.
LinkedIn
Jobb på företaget

Senior Staff Software Engineer, AI-plattform – hybrid i Palo Alto

Led strategin, arkitekturen och införandet av Pinterests plattform för utvärdering av AI och maskininlärning. Hjälp till att etablera tillförlitliga utvärderingsmetoder för GenAI-upplevelser i hela företaget.

USUSACAKalifornien
208 592 $ – 429 454 $ / år
HybridHeltidSeniorObligatoriskt Språk: engelskaAI-ingenjörMaskininlärningsingenjör
Distribuerade systemPython

Beskrivning

  • Identifiera möjligheter till modernisering och utöka färdplanen för ett företagsövergripande utvärderingssystem genom tekniskt ledarskap
  • Fastställ teknisk inriktning över organisationsgränser, samordna partnerteam och öka användningen av gemensamma utvärderingsfunktioner
  • Fatta långsiktiga arkitekturbeslut som stärker användarupplevelsen och tillförlitligheten hos Pinterests plattform för utvärdering av AI och maskininlärning
  • Utveckla utvärderingsmetoder och standarder som kombinerar automatiserade mått, expertgranskning, mänsklig feedback, säkerhet och affärsresultat
  • Led komplexa initiativ över flera team, hantera tekniska avvägningar och risker och skapa mätbar effekt
  • Vidareutveckla Pinterests plattform för utvärdering av AI och maskininlärning till ett enhetligt och pålitligt system som används i hela företaget
  • Samarbeta med teknik-, forsknings-, produkt- och säkerhetsteam för att förbättra kvalitet, lanseringsbeslut och förtroendet för AI-drivna upplevelser

Krav

  • Minst 3 års praktisk erfarenhet av att utforma och driva utvärderingssystem för GenAI och komplexa maskininlärningssystem
  • Erfarenhet av att skapa benchmarktester och gyllene dataset, tillämpa automatiserade mått och mänsklig utvärdering, använda modellbaserad gradering och analysera fel
  • Mycket goda kunskaper i Python
  • God förståelse för principer för distribuerade system
  • Förmåga att effektivt iterera med AI-verktyg under kodning och systemdesign
  • Omfattande kunskap om bibliotek och ramverk för utvärdering av GenAI och rekommendationssystem, inklusive AutoEvals, OpenEvals och Ragas
  • Minst 5 års erfarenhet av att utveckla skalbara plattformar för distribuerade experiment, versionshantering av data och modeller, orkestrering, observerbarhet, releasehantering och produktionsövervakning
  • Gott omdöme när det gäller GenAI-risker som robusthet, partiskhet, integritet, säkerhet och begränsningarna hos automatiserade utvärderingssignaler
  • Kandidatexamen i datavetenskap, ingenjörsvetenskap eller närliggande område, eller motsvarande erfarenhet

Förmåner

  • Möjlighet att kvalificera sig för aktieersättning
  • Flexibel PinFlex-arbetsmodell
  • Samarbete på plats en eller två gånger per kvartal
  • Arbetsplats med lika möjligheter
  • Stöd med medicinska eller religiösa anpassningar under ansökningsprocessen

Relaterade jobb