LogoFresh Jobs Ahead
mpathic
mpathic
11 – 50 Zaměstnanci
PoradenstvíPotraviny a nápojeZdravotní péče
mpathic vyvíjí software pro bezpečnost a analytiku umělé inteligence, který pomáhá porozumět interakcím lidí s AI i mezi lidmi navzájem a zlepšovat je. SaaS produkty a API společnosti podporují převod řeči na text, odstraňování osobních údajů, analýzu chování a kontrolních seznamů, referenční datové sady, red teaming a ochranná opatření zohledňující konkrétní obor prostřednictvím Observing Agent API. Společnost obsluhuje týmy ve zdravotnictví, biologických vědách, klinickém výzkumu, pojišťovnictví a podnikovém sektoru, které usilují o posílení empatie, omezení předsudků a podporu bezpečnějších interakcí lépe splňujících požadavky.
LinkedIn
Pracovní nabídky společnosti

Odborník na hodnocení AI/ML ve zdravotnictví

Posuzujte důkazy pro aplikace AI ve zdravotnictví v rámci regulačních hodnocení v sandboxu mpathic. Hodnoťte validaci modelů, spolehlivost, ochranná opatření a monitorování pro klinické použití.

USSpojené státyNa dálkuSmlouvaStředně pokročilýSeniorPožadovaný Jazyk: angličtinaUmělá inteligence

Popis

  • Posuzovat technické důkazy pro aplikace AI ve zdravotnictví, včetně výkonnosti, validace, zobecnitelnosti, spolehlivosti, monitorování a ochranných opatření.
  • Prověřovat validační metody, referenční standardy, velikosti vzorků, statistické analýzy, metriky, provozní prahové hodnoty a nejistotu.
  • Zkoumat kvalitu a reprezentativnost dat, včetně úniku dat, rozdílů mezi podskupinami a zobecnitelnosti napříč skupinami pacientů a prostředími péče.
  • Testovat technickou spolehlivost, robustnost, reprodukovatelnost, režimy selhání a chování při atypických vstupech nebo vstupech mimo rozdělení.
  • Prověřovat plány hodnocení, benchmarky a kritéria úspěchu pro pilotní nasazení.
  • Hodnotit technická ochranná opatření, postupy eskalace a procesy lidského dohledu.
  • Prověřovat plány monitorování a řízení změn zaměřené na odhalování poklesu výkonnosti, sledování chování modelu, správu aktualizací a zásahů a stanovení kritérií pro návrat k předchozí verzi.
  • Spolupracovat s kliniky a technickými odborníky na řešení mezioborových otázek.
  • Zaznamenávat silné stránky, omezení, mezery v důkazech a technické připomínky podle standardního rámce hodnocení.
  • Formulovat jasná doporučení podložená důkazy a specifikovat potřebné důkazy nebo změny.
  • Účastnit se kalibrace hodnotitelů a zajišťování kvality.
  • Zachovávat nezávislost a důvěrnost a dodržovat požadavky týkající se střetu zájmů a nakládání s daty.

Požadavky

  • Nejméně tři roky odborné praxe nebo zkušeností s aplikovaným výzkumem ve strojovém učení, datové vědě, biostatistice, klinické informatice nebo příbuzném oboru, včetně přímé práce na hodnocení nebo validaci prediktivních modelů či systémů AI.
  • Porozumění metodám hodnocení modelů, včetně vhodných metrik výkonnosti, návrhu validace, statistické nejistoty, výběru prahových hodnot a běžných zdrojů zkreslení či metodologických chyb.
  • Zkušenosti s hodnocením výkonnosti modelů na nezávislých nebo odložených datech a posuzováním, zda lze výsledky zobecnit i mimo hodnoticí datovou sadu.
  • Praktické zkušenosti s hodnocením alespoň jednoho relevantního typu systému AI, například klinického zpracování přirozeného jazyka, velkých jazykových modelů, konverzační AI, lékařského zobrazování, počítačového vidění nebo prediktivních modelů nad tabulkovými daty.
  • Schopnost kriticky posuzovat technický výzkum, hodnoticí zprávy nebo validační studie a rozpoznávat metodologické slabiny či nepodložené závěry.
  • Výborné analytické písemné dovednosti a schopnost srozumitelně vysvětlit složitá zjištění netechnickému publiku.
  • Schopnost pracovat samostatně a přispívat k mezioborovému odbornému hodnocení a kalibraci.
  • Ochota uzavřít dohody o důvěrnosti, předložit prohlášení o střetu zájmů a absolvovat školení pro hodnotitele.
  • Zkušenosti s hodnocením systémů AI nebo ML ve zdravotnictví, při podpoře klinického rozhodování, v digitálním zdravotnictví nebo v jiném vysoce rizikovém prostředí.
  • Znalost rámců pro hodnocení a vykazování klinické AI, jako jsou TRIPOD+AI, STARD-AI, CONSORT-AI, DECIDE-AI nebo karty modelů.
  • Zkušenosti s hodnocením generativní AI, systémů založených na velkých jazykových modelech nebo autonomních agentů, včetně chování ve více tazích, spolehlivosti, halucinací a ochranných opatření.
  • Zkušenosti s testováním robustnosti, adversariálním hodnocením, red teamingem nebo systematickou analýzou režimů selhání.
  • Znalost provozního monitorování, posunu distribuce, driftu modelů, správy verzí a řízení změn.
  • Zkušenosti s návrhem nebo hodnocením systémů s účastí člověka nebo s porovnáváním výkonnosti modelu s úsudky lidských odborníků.
  • Znalost pokynů FDA pro zdravotnické prostředky využívající AI, podporu klinického rozhodování nebo software jako zdravotnický prostředek.
  • Zkušenosti s nezávislými technickými posudky, vědeckým recenzním řízením, hodnocením grantů nebo formálním hodnocením technologií.
  • Zkušenosti se spoluprací s kliniky, výzkumníky nebo regulačními aktéry při hodnocení či nasazování AI.

Benefity

  • Smluvní spolupráce s odměnou za každé posouzení.
  • Úvodní školení hodnotitelů o rámci hodnocení a požadavcích projektu před prvním zadáním.

Související pracovní nabídky

Volga Partners

Lékařský expert pro hodnocení modelů AI

Volga Partners
1 001 – 5 000 Zaměstnanci
Sponzor víza H1BB2BPodnikUmělá inteligence
AUAustrálieCAKanadaGBSpojené královstvíINIndieNZNový ZélandPHFilipínyUSSpojené státy
35 $ – 150 $ / hodina
Na dálkuSmlouvaStředně pokročilýSeniorPožadovaný Jazyk: angličtinaUmělá inteligence

Společnost Volga Partners hledá lékaře, zdravotní sestry s rozšířenou praxí a asistenty lékaře, kteří budou hodnotit klinickou přesnost, uvažování a bezpečnost zdravotnického obsahu vytvořeného AI. Vzdálené projektové zakázky na smlouvu; jejich rozsah se řídí potřebami projektu.

Otevřít