Pinterest je platforma na vizuálne objavovanie, kde ľudia nachádzajú inšpiráciu, ukladajú si nápady a organizujú ich podľa záujmov, projektov a nákupov. Jej prostredie spája personalizované odporúčania a vizuálne vyhľadávanie v témach, ako sú dizajn interiéru, móda, recepty a podujatia, pričom tvorcom a predajcom pomáha oslovovať publikum prostredníctvom nástrojov pre elektronický obchod a reklamu.
Seniorný Staff softvérový inžinier, platforma AI – hybridná práca v Palo Alto
Povediete stratégiu, architektúru a zavádzanie hodnotiacej platformy Pinterestu pre AI a strojové učenie. Pomôžete zaviesť spoľahlivé postupy hodnotenia generatívnych AI funkcií v celej spoločnosti.
Popis
- Identifikujte príležitosti na modernizáciu a rozširujte plán celopodnikového hodnotiaceho systému prostredníctvom technického vedenia
- Určujte technické smerovanie naprieč funkciami, koordinujte partnerské tímy a zvyšujte využívanie zdieľaných hodnotiacich funkcií
- Prijímajte dlhodobé architektonické rozhodnutia, ktoré posilnia používateľskú skúsenosť a spoľahlivosť hodnotiacej platformy Pinterestu pre AI a strojové učenie
- Vyvíjajte metódy a štandardy hodnotenia, ktoré kombinujú automatizované metriky, odborné posudzovanie, spätnú väzbu od ľudí, bezpečnosť a obchodné výsledky
- Veďte komplexné iniciatívy naprieč tímami, riadte technické kompromisy a riziká a dosahujte merateľný vplyv
- Rozvíjajte hodnotiacu platformu Pinterestu pre AI a strojové učenie na jednotný a spoľahlivý systém používaný v celej spoločnosti
- Spolupracujte s tímami pre vývoj, výskum, produkt a bezpečnosť s cieľom zlepšovať kvalitu, rozhodnutia o uvedení na trh a dôveru v skúsenosti založené na AI
Požiadavky
- Minimálne 3 roky praktických skúseností s návrhom a prevádzkou hodnotiacich systémov pre generatívnu AI a komplexné systémy strojového učenia
- Skúsenosti s tvorbou benchmarkov a referenčných datasetov, používaním automatizovaných metrík a ľudského hodnotenia, modelovým známkovaním a analýzou zlyhaní
- Pokročilá znalosť Pythonu
- Pracovná znalosť princípov distribuovaných systémov
- Schopnosť efektívne iterovať s nástrojmi AI pri programovaní a návrhu systémov
- Rozsiahle znalosti knižníc a frameworkov na hodnotenie generatívnej AI a odporúčacích systémov vrátane AutoEvals, OpenEvals a Ragas
- Minimálne 5 rokov skúseností s vývojom škálovateľných platforiem pre distribuované experimentovanie, verzovanie dát a modelov, orchestráciu, observabilitu, riadenie vydaní a monitorovanie v produkcii
- Dobrý úsudok pri rizikách generatívnej AI, ako sú robustnosť, skreslenie, súkromie, bezpečnosť a obmedzenia automatizovaných hodnotiacich signálov
- Bakalárske vzdelanie v odbore informatika, inžinierstvo alebo príbuznom odbore, prípadne rovnocenné skúsenosti
Benefity
- Možnosť získať podielové nástroje
- Flexibilný pracovný model PinFlex
- Osobná spolupráca raz alebo dvakrát za štvrťrok
- Pracovisko poskytujúce rovnaké príležitosti
- Podpora pri zabezpečení zdravotných alebo náboženských úprav počas prijímacieho procesu