LogoFresh Jobs Ahead
RBC
RBC
H1B viisa sponsorKindlustusPangandusRahandus
RBC on Kanadas asuv peakontoriga ülemaailmne finantsteenuste ettevõte, mille tegevus hõlmab pangandust, finantseerimist, kindlustust, investeerimist, varahaldust, finantsplaneerimist ja kapitaliturge. RBC teenindab enam kui 17 miljonit klienti Kanadas, Ameerika Ühendriikides ja veel 27 riigis ning ettevõttes töötab üle 94 000 inimese. Selle mitmekesine ärimudel ühendab väljakujunenud finantsteenused keskendumisega innovatsioonile ja kliendikogemusele.
LinkedIn
Töökohad ettevõttes

Vanem andmeteadlane, tehisintellekti hindamisplatvorm

Juhi RBC ettevõtte tehisintellektisüsteemide hindamisraamistike, andmekogumite ja kvaliteedikontrollide kavandamist. Sea tehnilised standardid, toeta juhtimise tõendusmaterjali loomist ja juhenda andmeteaduse meeskondi kogu Kanadas.

CAKanadaKohapealTäistööaegJuhtivspetsialistNõutav Keel: ingliseAndmeteadlane
GrafanaPythonSQL

Kirjeldus

  • Tööta välja täiustatud hindamismeetodid mudelitele ja agentidele, kasutades andmekogumeid, hindamisjuhiseid, LLM-as-judge’i tehnikaid, deterministlikku punktiarvestust, inimeste tehtavat ülevaatust ja mõõtmisraamistikke.
  • Kehtesta hindamisteaduse standardid, mis muudavad mudeliriski, vastutustundliku tehisintellekti, tootekvaliteedi, ohutuse ja ärivajadused mõõdetavateks kriteeriumiteks ning korratavateks protsessideks.
  • Halda hindamisandmekogumite ja punktikaartide kogu elutsüklit alates hankimisest ja kureerimisest kuni valideerimise, kvaliteedi tagamise, versioonihalduse, päritolu jälgimise, taaskasutuse ja pideva täiustamiseni.
  • Loo skaleeritavad hindamisstrateegiad generatiivsele ja agentsele tehisintellektile ülesande, töövoo, trajektoori ja käitusaja tasandil.
  • Tee koostööd tehisintellektiuuringute, platvormitehnika, toote-, riski-, juhtimis- ja ärimeeskondadega, et lõimida hindamised arendus-, väljalaske-, sertifitseerimis-, seire- ja taassertifitseerimisprotsessidesse.
  • Koosta inimhindamise ja ülevaatuse protokollid, mis tagavad usaldusväärsed märgendid, hindajate juhised, lahendamise ja vaidluste menetlemise korrad, kvaliteedikontrollid ning auditeerimiseks valmis tõendusmaterjali.
  • Hinda ja paranda hindajate täpsust, kalibreeritust, töökindlust, tõrkerežiimide katvust ja selgitatavust nii automaatsetes kui ka inimeste tehtavates hindamismeetodites.
  • Anna tehnilist suunda, suhtle tõhusalt juhtidega ja juhenda nooremaid andmeteadlasi.

Nõuded

  • Sul on vähemalt kaheksa aastat kogemust andmeteaduse, rakendusliku masinõppe, tehisintellekti hindamise, masinõppe kvaliteedi või sellega seotud tehnilisel alal, sealhulgas tehnilise juhtimise ja meeskonna juhendamise kogemus.
  • Sul on tugev kogemus masinõppe, generatiivse tehisintellekti või agentsete tehisintellektisüsteemide hindamisraamistike loomisel, hõlmates mõõdikuid, andmekogumeid, võrdlusaluseid, hindamisjuhiseid ja kvaliteedi mõõtmist.
  • Tunned praktiliselt LLM-i hindamise lähenemisviise, nagu LLM-as-judge, deterministlik punktiarvestus, inimeste tehtav ülevaatus, hallutsinatsioonide ja faktilisuse hindamine, ohutuse hindamine ning mudelikvaliteedi võrdlusuuringud.
  • Sul on tugev alus andmeteaduses, statistikas, masinõppes, eksperimentaalses disainis, andmete kureerimises, Pythonis, SQL-is ning tänapäevastes tehisintellekti ja masinõppe arendustavades.
  • Oskad muuta juhtimise, mudeliriski, vastutustundliku tehisintellekti ja ärinõuded mõõdetavateks kontrollmeetmeteks, korratavateks hindamisprotsessideks ja otsustamiseks sobivaks tõendusmaterjaliks.
  • Suhtled selgelt ja juhid sidusrühmi tõhusalt ning suudad mõjutada teadusuuringute, tehnika, toote, juhtimise, riski ja ärifunktsioonide kõrgema taseme juhte.
  • Sul on kogemus agentse tehisintellekti, tööriistakutsega töövoogude, mitmeastmelise arutluse, käitusaja jälgede, trajektoori hindamise või töövootasandi jõudluse hindamisel.
  • Sul on kogemus finantsteenuste, reguleeritud tehisintellekti, mudeliriski juhtimise, vastutustundliku tehisintellekti, ettevõtte juhtimise või auditeerimiseks valmis tõendusmaterjali protsessidega.
  • Tunned MLflow’d, Langfuse’i, LangSmithi, OpenTelemetryt, Grafanat, CI/CD-konveiereid või võrreldavaid hindamis- ja jälgitavustööriistu.
  • Asjakohased on publikatsioonid, patendid, avatud lähtekoodi panused või tööstuskogemus tehisintellekti hindamise, masinõppe kvaliteedi, tehisintellekti ohutuse, rakendusuuringute või vastutustundliku tehisintellekti alal.

Hüved

  • Saad Total Rewards programmi, mis hõlmab boonuseid, paindlikke hüvesid, konkurentsivõimelist tasu, komisjonitasusid ja kohaldatavaid aktsiapõhiseid hüvesid.
  • Arenda oma karjääri juhtide kõrval, kes pakuvad juhendamist ja võimalusi juhtimiskogemuse omandamiseks.
  • Panusta töösse, mille eesmärk on luua tähenduslik ja püsiv mõju.
  • Liitu koostööalti, edumeelse, dünaamilise ja tulemusliku meeskonnaga.
  • Kasuta põhjalikku finantsteenustele keskenduvat koolitusprogrammi.
  • Võta vastu väljakutseid pakkuv töö, mis pakub professionaalse arengu võimalusi.

Seotud töökohad