RBC
RBC
RBC to globalna instytucja finansowa z siedzibą w Kanadzie, której działalność obejmuje bankowość, finansowanie, ubezpieczenia, inwestowanie, zarządzanie majątkiem, planowanie finansowe oraz rynki kapitałowe. Firma obsługuje ponad 17 milionów klientów w Kanadzie, Stanach Zjednoczonych i 27 innych krajach, a jej zespół liczy ponad 94 000 pracowników. Zdywersyfikowany model działalności RBC łączy ugruntowane usługi finansowe z naciskiem na innowacje i jakość obsługi klienta.

Starszy specjalista ds. danych, platforma oceny AI

Kieruj projektowaniem systemów oceny, zbiorów danych i kontroli jakości dla korporacyjnych systemów AI RBC. Ustanawiaj standardy techniczne, wspieraj dokumentację na potrzeby nadzoru i mentoring zespołów data science w całej Kanadzie.

Opis

  • Opracowuj zaawansowane metody oceny modeli i agentów z wykorzystaniem zbiorów danych, rubryk, technik LLM-as-a-judge, deterministycznego oceniania, weryfikacji przez człowieka i ram pomiarowych.
  • Ustanawiaj standardy nauki o ocenie, przekładając ryzyko modeli, odpowiedzialną AI, jakość produktu, bezpieczeństwo i potrzeby biznesowe na mierzalne kryteria oraz powtarzalne procesy.
  • Zarządzaj pełnym cyklem życia zbiorów danych i kart wyników oceny — od pozyskiwania i kuracji po walidację, zapewnianie jakości, wersjonowanie, śledzenie pochodzenia, ponowne wykorzystanie i ciągłe doskonalenie.
  • Twórz skalowalne strategie oceny generatywnej i agentowej AI na poziomie zadań, przepływów pracy, trajektorii i działania w czasie wykonywania.
  • Współpracuj z zespołami badań nad AI, inżynierii platform, produktu, ryzyka, nadzoru i biznesu, aby integrować oceny z procesami rozwoju, wydawania, certyfikacji, monitorowania i ponownej certyfikacji.
  • Twórz protokoły oceny i weryfikacji przez człowieka zapewniające wiarygodne etykiety, instrukcje dla oceniających, procedury rozstrzygania, kontrole jakości i dowody gotowe do audytu.
  • Oceniaj i poprawiaj dokładność oraz kalibrację oceniających, odporność, pokrycie trybów awarii i wyjaśnialność w automatycznych oraz ludzkich metodach oceny.
  • Wyznaczaj kierunek techniczny, skutecznie komunikuj się z kadrą kierowniczą i pełnij funkcję mentora dla młodszych specjalistów ds. danych.

Wymagania

  • Mieć co najmniej osiem lat doświadczenia w data science, stosowanym uczeniu maszynowym, ocenie AI, jakości ML lub pokrewnej dziedzinie technicznej, w tym doświadczenie w przywództwie technicznym i mentoringu zespołu.
  • Mieć szerokie doświadczenie w tworzeniu ram oceny dla systemów uczenia maszynowego, generatywnej lub agentowej AI, obejmujących metryki, zbiory danych, benchmarki, rubryki i pomiar jakości.
  • Posiadać praktyczną znajomość metod oceny LLM, takich jak LLM-as-a-judge, ocenianie deterministyczne, weryfikacja przez człowieka, ocena halucynacji i faktograficzności, ocena bezpieczeństwa oraz benchmarkowanie jakości modeli.
  • Mieć solidne podstawy w data science, statystyce, uczeniu maszynowym, eksperymentach, kuracji danych, Pythonie, SQL i aktualnych praktykach tworzenia AI/ML.
  • Umieć przekładać wymagania dotyczące nadzoru, ryzyka modeli, odpowiedzialnej AI i biznesu na mierzalne mechanizmy kontroli, powtarzalne procesy oceny oraz dowody przydatne w podejmowaniu decyzji.
  • Jasno się komunikować i skutecznie zarządzać interesariuszami, z umiejętnością wywierania wpływu na kadrę kierowniczą w obszarach badań, inżynierii, produktu, nadzoru, ryzyka i biznesu.
  • Mieć doświadczenie w ocenie agentowej AI, przepływów pracy z wywoływaniem narzędzi, wieloetapowego rozumowania, śladów działania, oceny trajektorii lub wydajności na poziomie przepływu pracy.
  • Mieć doświadczenie w usługach finansowych, regulowanej AI, zarządzaniu ryzykiem modeli, odpowiedzialnej AI, nadzorze korporacyjnym lub procesach przygotowywania dowodów gotowych do audytu.
  • Znać MLflow, Langfuse, LangSmith, OpenTelemetry, Grafanę, potoki CI/CD lub porównywalne narzędzia do oceny i obserwowalności.
  • Publikacje, patenty, wkład w projekty open source lub doświadczenie branżowe w ocenie AI, jakości ML, bezpieczeństwie AI, badaniach stosowanych lub odpowiedzialnej AI będą dodatkowym atutem.

Benefity

  • Otrzymasz program całkowitego wynagrodzenia obejmujący premie, elastyczne świadczenia, konkurencyjne wynagrodzenie, prowizje i odpowiednie nagrody w postaci akcji.
  • Rozwijaj karierę u boku liderów oferujących coaching i możliwości zarządzania.
  • Przyczyniaj się do pracy zaprojektowanej tak, aby wywierać znaczący i trwały wpływ.
  • Dołącz do zespołu, który jest współpracujący, progresywny, dynamiczny i osiąga wysokie wyniki.
  • Uzyskaj dostęp do kompleksowego programu szkoleniowego skoncentrowanego na usługach finansowych.
  • Podejmuj ambitne zadania z możliwościami rozwoju zawodowego.

Powiązane oferty pracy

HealthPlanOne

Młodszy menedżer ds. klientów HealthPlanOne (praca hybrydowa)

HealthPlanOne
501 – 1000 Pracownicy
DoradztwoMarketingOpieka zdrowotna

Wspieraj relacje HealthPlanOne z klientami z branży ubezpieczeń zdrowotnych, realizację programów i utrzymanie klientów. Doradzaj klientom, monitoruj zobowiązania dotyczące obsługi oraz wskazuj możliwości poprawy wyników i rozszerzenia usług.

Otwórz
European Society of Radiology

Młodszy menedżer ds. relacji korporacyjnych, wydarzeń i sponsoringu

European Society of Radiology

Sprzedaż powierzchni wystawienniczej, sponsoringu i reklam dla Europejskiego Towarzystwa Radiologicznego. Koordynacja sympozjów kongresowych, partnerów branżowych i logistyki wydarzeń.

Otwórz
Suvoda

Menedżer projektów lokalizacyjnych

Suvoda

Koordynuj tłumaczenia kwestionariuszy i wymagania dotyczące elektronicznej oceny klinicznych punktów końcowych (eCOA) dla technologii Suvoda stosowanej w badaniach klinicznych. Zarządzaj dostawcami tłumaczeń, plikami JSON, raportami ekranów i harmonogramami projektów.

Otwórz
Harris Computer

Starszy architekt oprogramowania: Java i AI

Harris Computer

Kieruj architekturą oprogramowania medycznego MEDHOST: aplikacjami w Javie i aplikacjami internetowymi, rozwojem wspieranym przez AI oraz integracją dużych modeli językowych. Wyznaczaj standardy techniczne, cele wydajnościowe i kierunki pracy zespołów na każdym etapie cyklu wytwarzania oprogramowania.

Otwórz
LPA, Inc.

Starszy architekt projektów, Dallas (praca hybrydowa)

LPA, Inc.
201 – 500 Pracownicy
Budownictwo

Kieruj zrównoważonymi projektami architektonicznymi w studiu LPA w Dallas, prowadząc je od projektowania po budowę. Zakres obowiązków obejmuje dokumentację, nadzór nad realizacją, koordynację specjalistów z różnych dziedzin oraz mentoring młodszych pracowników.

Otwórz
F5

Inżynier niezawodności serwisów II, IAM — F5

F5

Zarządzaj operacjami związanymi z tożsamością i dostępem, automatyzacją oraz monitorowaniem bezpiecznej infrastruktury F5. Wspieraj platformy chmurowe i migracje oraz reaguj na pilne incydenty w ramach dyżurów.

Otwórz
Truist

Starszy inżynier ds. rozwiązań infrastrukturalnych

Truist

Starszy inżynier projektuje i automatyzuje bezpieczną, odporną infrastrukturę Truist w środowiskach chmurowych, lokalnych i hybrydowych. Rola koncentruje się na obserwowalności, odzyskiwaniu po awarii i niezawodnych platformach korporacyjnych.

Otwórz
Health Care Service Corporation

Starszy architekt aplikacji — praca zdalna, Illinois

Health Care Service Corporation

Projektuj architekturę aplikacji zgodnie z planem HCSC i łącz aplikacje, bazy danych oraz oprogramowanie pośredniczące. Współpracuj z zespołami dostarczającymi rozwiązania w zakresie projektowania technicznego, Azure, Databricks, DevOps i architektury rozwiązań.

Otwórz