RBC
RBC
RBC yra pasaulinė finansinių paslaugų institucija, kurios būstinė įsikūrusi Kanadoje. Jos veikla apima bankininkystę, finansavimą, draudimą, investavimą, turto valdymą, finansų planavimą ir kapitalo rinkas. RBC aptarnauja daugiau kaip 17 mln. klientų Kanadoje, Jungtinėse Valstijose ir dar 27 šalyse, o įmonėje dirba daugiau kaip 94 000 darbuotojų. Įvairiapusis jos veiklos modelis apjungia nusistovėjusias finansines paslaugas ir dėmesį inovacijoms bei klientų patirčiai.

Vyriausiasis duomenų mokslininkas, DI vertinimo platforma

Vadovauk RBC įmonių DI sistemų vertinimo sistemų, duomenų rinkinių ir kokybės kontrolės priemonių kūrimui. Nustatyk techninius standartus, padėk rengti valdymo įrodymus ir ugdyk duomenų mokslo komandas visoje Kanadoje.

Aprašymas

  • Kurk pažangius modelių ir agentų vertinimo metodus, naudodamas duomenų rinkinius, vertinimo kriterijus, LLM-as-judge metodus, deterministinį balų skyrimą, žmogaus atliekamą peržiūrą ir matavimo sistemas.
  • Nustatyk vertinimo mokslo standartus, kurie modelių riziką, atsakingąjį DI, produkto kokybę, saugą ir verslo poreikius paverčia išmatuojamais kriterijais bei pakartojamais procesais.
  • Valdyk visą vertinimo duomenų rinkinių ir balų kortelių gyvavimo ciklą – nuo šaltinių parinkimo ir kuravimo iki validavimo, kokybės užtikrinimo, versijavimo, kilmės sekimo, pakartotinio naudojimo ir nuolatinio tobulinimo.
  • Kurk keičiamo masto generatyviojo ir agentinio DI vertinimo strategijas užduočių, darbo eigos, trajektorijos ir vykdymo laiko lygmenimis.
  • Bendradarbiauk su DI tyrimų, platformų inžinerijos, produktų, rizikos, valdymo ir verslo komandomis, kad vertinimai būtų integruoti į kūrimo, išleidimo, sertifikavimo, stebėsenos ir pakartotinio sertifikavimo procesus.
  • Kurk žmogaus atliekamo vertinimo ir peržiūros protokolus, užtikrinančius patikimas žymas, vertintojų instrukcijas, sprendimo ir ginčų nagrinėjimo procedūras, kokybės kontrolę bei auditui parengtus įrodymus.
  • Vertink ir gerink vertintojų tikslumą, kalibravimą, atsparumą, gedimo režimų aprėptį ir paaiškinamumą taikant automatinius bei žmogaus atliekamus vertinimo metodus.
  • Teik techninę kryptį, veiksmingai bendrauk su vadovais ir ugdyk jaunesniuosius duomenų mokslininkus.

Reikalavimai

  • Turėk bent aštuonerių metų patirties duomenų mokslo, taikomojo mašininio mokymosi, DI vertinimo, ML kokybės ar susijusioje techninėje srityje, įskaitant techninio vadovavimo ir komandos mentorystės patirtį.
  • Turėk didelę patirtį kuriant mašininio mokymosi, generatyviojo DI ar agentinio DI sistemų vertinimo sistemas, apimančias metrikas, duomenų rinkinius, etalonus, vertinimo kriterijus ir kokybės matavimą.
  • Praktiškai išmanyk LLM vertinimo metodus, tokius kaip LLM-as-judge, deterministinis balų skyrimas, žmogaus atliekama peržiūra, haliucinacijų ir faktų tikslumo vertinimas, saugos vertinimas bei modelio kokybės lyginamoji analizė.
  • Turėk tvirtus duomenų mokslo, statistikos, mašininio mokymosi, eksperimentavimo, duomenų kuravimo, Python, SQL ir šiuolaikinių DI bei ML kūrimo praktikų pagrindus.
  • Gebėk valdymo, modelių rizikos, atsakingojo DI ir verslo reikalavimus paversti išmatuojamomis kontrolėmis, pakartojamais vertinimo procesais ir sprendimams tinkamais įrodymais.
  • Aiškiai komunikuok ir veiksmingai valdyk suinteresuotąsias šalis, gebėk daryti įtaką vyresniesiems tyrimų, inžinerijos, produktų, valdymo, rizikos ir verslo funkcijų vadovams.
  • Turėk agentinio DI, įrankių iškvietimo darbo eigų, kelių etapų samprotavimo, vykdymo laiko pėdsakų, trajektorijų vertinimo ar darbo eigos lygmens našumo vertinimo patirties.
  • Turėk patirties finansinių paslaugų, reguliuojamo DI, modelių rizikos valdymo, atsakingojo DI, įmonių valdymo ar auditui parengtų įrodymų procesuose.
  • Išmanyk MLflow, Langfuse, LangSmith, OpenTelemetry, Grafana, CI/CD konvejerius ar panašius vertinimo ir stebimumo įrankius.
  • Publikacijos, patentai, atvirojo kodo indėlis ar pramonės patirtis DI vertinimo, ML kokybės, DI saugos, taikomųjų tyrimų ar atsakingojo DI srityse būtų laikomi pranašumu.

Privalumai

  • Gausi Total Rewards programą, apimančią premijas, lanksčias naudas, konkurencingą atlygį, komisinius ir taikomas akcijų premijas.
  • Kurk savo karjerą su vadovais, kurie teikia koučingą ir suteikia galimybių įgyti vadovavimo patirties.
  • Prisidėk prie darbo, skirto prasmingam ir ilgalaikiam poveikiui kurti.
  • Prisijunk prie bendradarbiaujančios, pažangios, dinamiškos ir aukštus rezultatus pasiekiančios komandos.
  • Naudokis išsamia mokymo programa, orientuota į finansines paslaugas.
  • Imkis sudėtingo darbo ir pasinaudok profesinio augimo galimybėmis.

Susiję darbai

Nivoda

Senior AI/ML Engineer, Remote in the United States

Nivoda

Develop ranking, recommendation, and multimodal search systems for Nivoda’s global jewellery marketplace and jeweller storefronts. Build production machine learning capabilities across search, product discovery, and image matching.

Atidaryti
CET Logistics

Business Engagement Specialist – CET Logistics

CET Logistics

Connect businesses and institutions with CET’s waste reduction and energy efficiency programs. Build referral networks, qualify leads, coordinate handoffs, and support carbon reduction efforts.

Atidaryti
FHI 360

Associate Director of Procurement, Administration and Logistics

FHI 360

Leads procurement, administration, logistics, and operations for FHI 360’s country office in the Democratic Republic of the Congo. Supervises functional leads and maintains compliance with donor, government, and supply chain requirements.

Atidaryti