mpathic
mpathic
mpathic razvija softver za sigurnost i analitiku umjetne inteligencije radi razumijevanja i poboljšanja interakcija između ljudi i umjetne inteligencije te međuljudskih interakcija. Njezini SaaS proizvodi i API-ji podržavaju pretvaranje govora u tekst, uklanjanje osobnih identifikacijskih podataka, analizu ponašanja i kontrolnih popisa, skupove podataka za usporedbu, red teaming te zaštitne mehanizme utemeljene na području primjene putem API-ja Observing Agent. Tvrtka pruža podršku timovima u zdravstvu, biološkim znanostima, kliničkim istraživanjima, osiguranju i poslovnom sektoru koji nastoje ojačati empatiju, smanjiti pristranost te podržati sigurnije interakcije usklađene s propisima.

Recenzent za vrednovanje zdravstvene AI/ML

Procjenjujte dokaze za zdravstvene AI aplikacije u okviru regulatornih evaluacija u mpathicovu sandboxu. Ocjenjujte validaciju modela, pouzdanost, zaštitne mjere i praćenje za kliničku primjenu.

Opis

  • Procjenjujte tehničke dokaze za zdravstvene AI aplikacije, uključujući učinkovitost, validaciju, mogućnost generalizacije, pouzdanost, praćenje i zaštitne mjere.
  • Pregledavajte metode validacije, referentne standarde, veličine uzoraka, statističke analize, metrike, operativne pragove i neizvjesnost.
  • Ispitujte kvalitetu i reprezentativnost podataka, uključujući curenje podataka, razlike među podskupinama i mogućnost generalizacije među skupinama pacijenata i okruženjima skrbi.
  • Testirajte tehničku pouzdanost, robusnost, ponovljivost, načine otkaza i ponašanje na atipičnim ulazima ili ulazima izvan distribucije.
  • Pregledavajte planove evaluacije, referentne testove i kriterije uspjeha za pilotna uvođenja.
  • Procjenjujte tehničke zaštitne mjere, putove eskalacije i procese ljudskog nadzora.
  • Pregledavajte planove praćenja i upravljanja promjenama za otkrivanje pada učinkovitosti, praćenje ponašanja modela, upravljanje ažuriranjima i intervencijama te određivanje kriterija za povratak na prethodnu verziju.
  • Surađujte s kliničarima i tehničkim stručnjacima na rješavanju pitanja koja obuhvaćaju više disciplina.
  • Bilježite prednosti, ograničenja, nedostatke u dokazima i tehničke nedoumice koristeći standardni okvir za pregled.
  • Dajte jasne preporuke utemeljene na dokazima i navedite potrebne dokaze ili promjene.
  • Sudjelujte u usklađivanju procjenitelja i osiguravanju kvalitete.
  • Održavajte neovisnost i povjerljivost te poštujte zahtjeve za sukob interesa i rukovanje podacima.

Zahtjevi

  • Najmanje tri godine profesionalnog iskustva ili iskustva u primijenjenom istraživanju u strojnom učenju, znanosti o podacima, biostatistici, kliničkoj informatici ili srodnom području, uključujući izravan rad na evaluaciji ili validaciji prediktivnih modela ili AI sustava.
  • Razumijevanje metoda evaluacije modela, uključujući odgovarajuće metrike učinkovitosti, dizajn validacije, statističku neizvjesnost, odabir pragova i uobičajene izvore pristranosti ili metodoloških pogrešaka.
  • Iskustvo u evaluaciji učinkovitosti modela na neovisnim ili izdvojenim podacima te procjeni mogu li se rezultati generalizirati izvan skupa podataka za evaluaciju.
  • Praktično iskustvo u evaluaciji barem jedne relevantne vrste AI sustava, primjerice kliničke obrade prirodnog jezika, velikih jezičnih modela, konverzacijske AI, medicinskog snimanja, računalnog vida ili prediktivnih modela nad tabličnim podacima.
  • Sposobnost kritičkog pregleda tehničkih istraživanja, izvješća o evaluaciji ili validacijskih studija te prepoznavanja metodoloških slabosti ili zaključaka bez potpore.
  • Snažne analitičke vještine pisanja i sposobnost jasnog objašnjavanja složenih nalaza netehničkoj publici.
  • Sposobnost samostalnog rada i doprinosa multidisciplinarnom stručnom pregledu i usklađivanju.
  • Spremnost na sklapanje sporazuma o povjerljivosti, podnošenje izjava o sukobu interesa i pohađanje obuke za procjenitelje.
  • Iskustvo u evaluaciji AI ili ML sustava u zdravstvu, podršci kliničkom odlučivanju, digitalnom zdravstvu ili drugom okruženju visokog rizika.
  • Poznavanje okvira za evaluaciju i izvještavanje o kliničkoj AI, kao što su TRIPOD+AI, STARD-AI, CONSORT-AI, DECIDE-AI ili kartice modela.
  • Iskustvo u evaluaciji generativne AI, sustava temeljenih na LLM-u ili autonomnih agenata, uključujući ponašanje kroz više razmjena, pouzdanost, halucinacije i zaštitne mjere.
  • Iskustvo s testiranjem robusnosti, adversarnom evaluacijom, red teamingom ili sustavnom analizom načina otkaza.
  • Poznavanje praćenja u produkciji, pomaka distribucije, odstupanja modela, kontrole verzija i upravljanja promjenama.
  • Iskustvo u dizajniranju ili evaluaciji sustava s uključenim čovjekom ili usporedbi učinkovitosti modela s prosudbama ljudskih stručnjaka.
  • Poznavanje smjernica FDA-e za medicinske uređaje s AI značajkama, podršku kliničkom odlučivanju ili softver kao medicinski uređaj.
  • Iskustvo u neovisnim tehničkim pregledima, znanstvenim recenzijama, recenzijama prijava za bespovratna sredstva ili formalnim evaluacijama tehnologije.
  • Iskustvo u suradnji s kliničarima, istraživačima ili regulatornim dionicima na evaluaciji ili uvođenju AI sustava.

Pogodnosti

  • Ugovorni angažman uz naknadu za svaku evaluaciju.
  • Uvodna obuka procjenitelja o okviru evaluacije i zahtjevima projekta prije prvog zadatka.

Povezani poslovi

Volga Partners

Stručnjak za zdravstvo za procjenu AI modela

Volga Partners

Volga Partners traži liječnike, medicinske sestre i asistente liječnika za procjenu kliničke točnosti, zaključivanja i sigurnosti medicinskog sadržaja koji generira AI. Rad na daljinu obavlja se na temelju projektnih ugovora, a angažmani se razlikuju ovisno o potrebama projekta.

Otvori