RBC
RBC
RBC er en global leverandør av finansielle tjenester med hovedkontor i Canada og virksomhet innen banktjenester, finansiering, forsikring, investeringer, formuesforvaltning, økonomisk planlegging og kapitalmarkeder. RBC betjener mer enn 17 millioner kunder i Canada, USA og 27 andre land, og har over 94 000 ansatte. Den diversifiserte forretningsmodellen kombinerer etablerte finansielle tjenester med fokus på innovasjon og kundeopplevelse.

Staff Data Scientist, plattform for AI-evaluering

Led utformingen av evalueringsrammeverk, datasett og kvalitetskontroller for RBCs AI-systemer for virksomheter. Fastsett tekniske standarder, støtt styringsdokumentasjon og veiled datavitenskapsteam over hele Canada.

Beskrivelse

  • Utvikle avanserte evalueringsmetoder for modeller og agenter ved hjelp av datasett, vurderingskriterier, LLM-som-dommer-teknikker, deterministisk skåring, menneskelig gjennomgang og målerammeverk.
  • Etablere standarder for evalueringsvitenskap som omsetter modellrisiko, ansvarlig AI, produktkvalitet, sikkerhet og forretningsbehov til målbare kriterier og repeterbare prosesser.
  • Administrere hele livssyklusen til evalueringsdatasett og skåringskort, fra innsamling og kuratering til validering, kvalitetssikring, versjonering, opphavssporing, gjenbruk og kontinuerlig forbedring.
  • Skape skalerbare evalueringsstrategier for generativ og agentisk AI på oppgave-, arbeidsflyt-, forløps- og kjøretidsnivå.
  • Samarbeide med team innen AI-forskning, plattformutvikling, produkt, risiko, styring og virksomhet for å integrere evalueringer i prosesser for utvikling, lansering, sertifisering, overvåking og resertifisering.
  • Bygge protokoller for menneskelig evaluering og gjennomgang som gir pålitelige etiketter, instruksjoner til vurderere, prosedyrer for avgjørelse av uenighet, kvalitetskontroller og revisjonsklar dokumentasjon.
  • Vurdere og forbedre skårernes nøyaktighet, kalibrering, robusthet, dekning av feilmønstre og forklarbarhet på tvers av automatiserte og menneskelige evalueringsmetoder.
  • Gi teknisk retning, kommunisere effektivt med ledere og veilede juniorer innen datavitenskap.

Krav

  • Ha minst åtte års erfaring innen datavitenskap, anvendt maskinlæring, AI-evaluering, ML-kvalitet eller en beslektet teknisk disiplin, inkludert teknisk ledelse og veiledning av team.
  • Ha solid erfaring med å lage evalueringsrammeverk for maskinlæring, generativ AI eller agentiske AI-systemer, med dekning av måltall, datasett, referansetester, vurderingskriterier og kvalitetsmåling.
  • Ha praktisk kunnskap om LLM-evalueringsmetoder som LLM-som-dommer, deterministisk skåring, menneskelig gjennomgang, vurdering av hallusinasjoner og faktakorrekthet, sikkerhetsevaluering og referansetesting av modellkvalitet.
  • Ha et sterkt grunnlag innen datavitenskap, statistikk, maskinlæring, eksperimentering, datakuratering, Python, SQL og aktuelle praksiser for AI- og ML-utvikling.
  • Omsette krav til styring, modellrisiko, ansvarlig AI og virksomhet til målbare kontroller, repeterbare evalueringsprosesser og dokumentasjon som egner seg for beslutningstaking.
  • Kommunisere tydelig og håndtere interessenter effektivt, med evne til å påvirke seniorledere på tvers av forskning, utvikling, produkt, styring, risiko og virksomhet.
  • Ha erfaring med å vurdere agentisk AI, arbeidsflyter med verktøykall, flertrinnsresonnering, kjøretidsspor, forløpsskåring eller ytelse på arbeidsflytnivå.
  • Ha erfaring fra finansielle tjenester, regulert AI, modellrisikostyring, ansvarlig AI, virksomhetsstyring eller prosesser for revisjonsklar dokumentasjon.
  • Være kjent med MLflow, Langfuse, LangSmith, OpenTelemetry, Grafana, CI/CD-pipelines eller sammenlignbare verktøy for evaluering og observerbarhet.
  • Publikasjoner, patenter, bidrag til åpen kildekode eller bransjeerfaring innen AI-evaluering, ML-kvalitet, AI-sikkerhet, anvendt forskning eller ansvarlig AI er relevant.

Fordeler

  • Motta et program for samlet belønning med bonuser, fleksible goder, konkurransedyktig lønn, provisjoner og aktuelle aksjetildelinger.
  • Utvikle karrieren din med ledere som tilbyr coaching og muligheter for lederutvikling.
  • Bidra til arbeid som er utformet for å skape meningsfull og varig innvirkning.
  • Bli med i et samarbeidsorientert, progressivt, dynamisk team med høy ytelse.
  • Få tilgang til et omfattende opplæringsprogram med fokus på finansielle tjenester.
  • Ta fatt på utfordrende arbeid med muligheter for faglig utvikling.

Relaterte jobber

MÜNZING CHEMIE GmbH

Salgsleder, spesialkjemikalier i Mid-Atlantic

MÜNZING CHEMIE GmbH
501 – 1 000 Ansatte
KjemiProduksjon

Led teknisk salg av spesialkjemiske tilsetningsstoffer i Mid-Atlantic, og betjen kunder innen maling og belegg, lim, trykkfarger og bygg. Forvalt eksisterende kunder og utvikle ny virksomhet gjennom kundebesøk og prosjektsalg.

Åpne
MÜNZING

MÜNZING salgsleder for Mid-Atlantic, spesialkjemikalier

MÜNZING

Led territoriesalget av MÜNZINGs spesialkjemiske tilsetningsstoffer i Mid-Atlantic-regionen, utvikle kunderelasjoner og slutt avtaler gjennom teknisk prosjektsalg. Forvalt et territorium verdt 3–5 millioner dollar, og bygg opp et forretningspotensial på 1–2 millioner dollar på kort sikt innen maling og belegg, lim, trykkfarger samt bygg- og anleggsmarkedene.

Åpne
Proofpoint

Kundeansvarlig for navngitte mellomstore virksomheter innen cybersikkerhet – Proofpoint

Proofpoint

Selg Proofpoints cybersikkerhetsplattform til mellomstore virksomheter i Washington eller Oregon. Rollen omfatter kundeansvar, partnersalg, prospektering og komplekse løsninger med flerårige avtaler.

Åpne