RBC
RBC
RBC je globální finanční instituce se sídlem v Kanadě, jejíž činnost zahrnuje bankovnictví, financování, pojišťovnictví, investování, správu majetku, finanční plánování a kapitálové trhy. Společnost obsluhuje více než 17 milionů klientů v Kanadě, Spojených státech a 27 dalších zemích a zaměstnává více než 94 000 lidí. Diverzifikovaný model RBC spojuje zavedené finanční služby se zaměřením na inovace a klientskou zkušenost.

Hlavní datový vědec, platforma pro hodnocení AI

Veďte návrh hodnoticích rámců, datových sad a kontrol kvality pro podnikové systémy AI společnosti RBC. Nastavujte technické standardy, podporujte podklady pro řízení a poskytujte mentoring datovým týmům po celé Kanadě.

Popis

  • Vyvíjejte pokročilé metody hodnocení modelů a agentů pomocí datových sad, rubrik, technik LLM-as-a-judge, deterministického skórování, lidské kontroly a měřicích rámců.
  • Stanovujte standardy vědy o hodnocení, které převádějí rizika modelů, odpovědnou AI, kvalitu produktu, bezpečnost a obchodní potřeby na měřitelná kritéria a opakovatelné procesy.
  • Řiďte celý životní cyklus hodnoticích datových sad a skórovacích karet od získávání a kurátorství přes validaci, zajištění kvality, verzování, sledování původu, opětovné využití až po průběžné zlepšování.
  • Vytvářejte škálovatelné strategie hodnocení generativní a agentní AI na úrovni úloh, pracovních postupů, trajektorií a běhu.
  • Spolupracujte s týmy výzkumu AI, platformního inženýrství, produktů, rizik, řízení a obchodu na začlenění hodnocení do procesů vývoje, vydávání, certifikace, monitorování a opakované certifikace.
  • Vytvářejte protokoly lidského hodnocení a kontroly, které zajistí spolehlivé štítky, pokyny pro hodnotitele, postupy rozhodování, kontroly kvality a podklady připravené k auditu.
  • Posuzujte a zlepšujte přesnost a kalibraci skórovacích metod, robustnost, pokrytí režimů selhání a vysvětlitelnost automatizovaných i lidských metod hodnocení.
  • Poskytujte technické vedení, efektivně komunikujte s vedoucími pracovníky a mentorujte juniorní datové vědce.

Požadavky

  • Mít alespoň osm let zkušeností v datové vědě, aplikovaném strojovém učení, hodnocení AI, kvalitě ML nebo příbuzné technické oblasti, včetně technického vedení a mentoringu týmu.
  • Prokázat rozsáhlé zkušenosti s tvorbou hodnoticích rámců pro systémy strojového učení, generativní nebo agentní AI, včetně metrik, datových sad, benchmarků, rubrik a měření kvality.
  • Mít praktické znalosti přístupů k hodnocení LLM, jako jsou LLM-as-a-judge, deterministické skórování, lidská kontrola, posuzování halucinací a faktické správnosti, hodnocení bezpečnosti a benchmarkování kvality modelů.
  • Mít pevné základy v datové vědě, statistice, strojovém učení, experimentování, kurátorství dat, Pythonu, SQL a současných postupech vývoje AI/ML.
  • Umět převádět požadavky řízení, rizik modelů, odpovědné AI a obchodu na měřitelné kontrolní mechanismy, opakovatelné hodnoticí procesy a podklady vhodné pro rozhodování.
  • Jasně komunikovat a efektivně řídit vztahy se zainteresovanými stranami se schopností ovlivňovat seniorní vedoucí pracovníky v oblasti výzkumu, inženýrství, produktů, řízení, rizik a obchodu.
  • Mít zkušenosti s hodnocením agentní AI, pracovních postupů s voláním nástrojů, vícekrokového uvažování, běhových tras, hodnocením trajektorií nebo výkonu na úrovni pracovních postupů.
  • Mít zkušenosti s finančními službami, regulovanou AI, řízením rizik modelů, odpovědnou AI, podnikovým řízením nebo procesy přípravy podkladů připravených k auditu.
  • Znát MLflow, Langfuse, LangSmith, OpenTelemetry, Grafanu, CI/CD pipeline nebo srovnatelné nástroje pro hodnocení a observabilitu.
  • Publikace, patenty, příspěvky do open-source projektů nebo oborové zkušenosti s hodnocením AI, kvalitou ML, bezpečností AI, aplikovaným výzkumem či odpovědnou AI jsou relevantní.

Benefity

  • Získejte program celkové odměny zahrnující bonusy, flexibilní benefity, konkurenceschopné ohodnocení, provize a příslušné akciové odměny.
  • Rozvíjejte svou kariéru s vedoucími pracovníky, kteří poskytují koučink a příležitosti k řízení.
  • Podílejte se na práci navržené tak, aby vytvářela smysluplný a trvalý dopad.
  • Připojte se ke spolupracujícímu, progresivnímu, dynamickému a vysoce výkonnému týmu.
  • Získejte přístup ke komplexnímu školicímu programu zaměřenému na finanční služby.
  • Přijměte náročnou práci s příležitostmi k profesnímu růstu.

Související pracovní nabídky

STS

Seniorní inženýr výkonové elektroniky, solární energetika

STS

Poskytovat poradenství v oblasti transformátorů, střídačů a systémů středního a vysokého napětí pro velké solární elektrárny a projekty bateriových úložišť. Provádět technologické přezkumy, testování v terénu a technickou hloubkovou prověrku projektů po celém světě.

Otevřít
American Red Cross

Pracovník kontaktního centra I na částečný úvazek — Americký červený kříž, Tucson

American Red Cross

Telefonicky kontaktujte dárce a objednávejte je na darování krve v kontaktním centru Amerického červeného kříže na částečný úvazek. Pozice poblíž Tucsonu zahrnuje úvodní školení v centru a hybridní formu práce.

Otevřít
Braun Intertec Corporation

Seniorní geotechnický inženýr, projekty zásadního významu

Braun Intertec Corporation

Veďte geotechnické práce na projektech zásadního významu ve společnosti Braun Intertec, která se věnuje environmentálnímu poradenství a inženýrství a patří svým zaměstnancům. Připravujte analýzy, doporučení a zprávy a dohlížejte na projekty.

Otevřít
Reactivate

Seniorní projektový inženýr pro komerční solární energetiku

Reactivate

Veďte projektování, nákup, výstavbu a uvádění do provozu komerčních a velkokapacitních solárních projektů Reactivate. Koordinujte technické kapacity, odborné kontroly, povolování a podporu výstavby na místě.

Otevřít
HUB International

Specialista zákaznického servisu v oblasti zaměstnaneckých benefitů

HUB International

Podpora zákaznického servisu, přípravy kalkulací a nabídek pro tým zaměstnaneckých benefitů společnosti HUB International. Hybridní práce v Casperu ve Wyomingu v úzké spolupráci s obchodními vedoucími a správci klientských účtů.

Otevřít
6sense

Specialista vzdálené IT podpory ve společnosti 6sense

6sense

Poskytujte podporu první a druhé úrovně zaměstnancům 6sense po celém světě a spravujte identity, SaaS aplikace, zařízení i nástroje AI. Zlepšujte IT provoz pomocí automatizace a vylepšování pracovních postupů.

Otevřít
A

Dvojjazyčný pracovník zákaznické podpory (angličtina a španělština)

Advantage TeleMessaging, Inc.

Přijímejte hovory a předávejte přesné zprávy firmám v USA a Kanadě jako vzdálený operátor dvojjazyčné telefonní služby. Poskytujte profesionální zákaznický servis v angličtině a španělštině.

Otevřít
Marathon Petroleum Corporation

Inženýr platformy Saviynt

Marathon Petroleum Corporation

Správa a rozvoj platformy pro správu identit Saviynt společnosti Marathon Petroleum: integrace IAM, automatizace, soulad s předpisy a reporting. Posilování zabezpečení společnosti v oblasti energetických operací.

Otevřít