LogoFresh Jobs Ahead
mpathic
mpathic
11 – 50 Dipendenti
Alimenti e bevandeAssistenza sanitariaConsulenza
mpathic sviluppa software per la sicurezza e l’analisi dell’IA, con l’obiettivo di comprendere e migliorare le interazioni tra persone e sistemi di IA, nonché quelle tra persone. I suoi prodotti SaaS e le sue API supportano la trascrizione vocale, la rimozione dei dati personali identificabili, l’analisi dei comportamenti e delle checklist, i dataset di benchmarking, il red teaming e le misure di protezione basate sul dominio attraverso la sua API Observing Agent. L’azienda serve team nei settori della sanità, delle scienze della vita, della ricerca clinica, delle assicurazioni e delle imprese che lavorano per rafforzare l’empatia, ridurre i pregiudizi e favorire interazioni più sicure e conformi alle normative.
LinkedIn
Offerte dell’azienda

Revisore della valutazione dell’IA/ML in ambito sanitario

Esamina le evidenze sulle applicazioni di IA in ambito sanitario nelle valutazioni del sandbox normativo di mpathic. Valuta validazione, affidabilità, salvaguardie e monitoraggio dei modelli per l’uso clinico.

USStati UnitiDa remotoContrattoIntermedioSeniorLingua Richiesta: ingleseIntelligenza artificiale

Descrizione

  • Valuta le evidenze tecniche sulle applicazioni di IA in ambito sanitario, considerando prestazioni, validazione, generalizzabilità, affidabilità, monitoraggio e salvaguardie.
  • Esamina i metodi di validazione, gli standard di riferimento, le dimensioni dei campioni, le analisi statistiche, le metriche, le soglie operative e l’incertezza.
  • Esamina la qualità e la rappresentatività dei dati, inclusi leakage, differenze tra sottogruppi e generalizzabilità a diversi gruppi di pazienti e contesti assistenziali.
  • Verifica l’affidabilità tecnica, la robustezza, la riproducibilità, le modalità di errore e il comportamento con input atipici o fuori distribuzione.
  • Esamina i piani di valutazione, i benchmark e i criteri di successo per le implementazioni pilota.
  • Valuta le salvaguardie tecniche, i percorsi di escalation e i processi di supervisione umana.
  • Esamina i piani di monitoraggio e gestione delle modifiche per rilevare cali di prestazione, seguire il comportamento del modello, gestire aggiornamenti e interventi e definire criteri di ripristino.
  • Collabora con professionisti clinici e specialisti tecnici per affrontare questioni interdisciplinari.
  • Registra punti di forza, limiti, lacune nelle evidenze e criticità tecniche utilizzando il quadro standard di revisione.
  • Formula raccomandazioni chiare e basate sulle evidenze e specifica le evidenze o le modifiche necessarie.
  • Partecipa alla calibrazione dei revisori e al controllo qualità.
  • Mantiene indipendenza e riservatezza, rispettando i requisiti relativi ai conflitti di interesse e alla gestione dei dati.

Requisiti

  • Almeno tre anni di esperienza professionale o di ricerca applicata nell’apprendimento automatico, nella data science, nella biostatistica, nell’informatica clinica o in un campo affine, con esperienza diretta nella valutazione o validazione di modelli predittivi o sistemi di IA.
  • Conoscenza dei metodi di valutazione dei modelli, incluse metriche di prestazione adeguate, progettazione della validazione, incertezza statistica, scelta delle soglie e fonti comuni di distorsione o errore metodologico.
  • Esperienza nella valutazione delle prestazioni di modelli su dati indipendenti o tenuti da parte e nella verifica della generalizzabilità dei risultati oltre il set di dati di valutazione.
  • Esperienza pratica nella valutazione di almeno un tipo pertinente di sistema di IA, come l’elaborazione del linguaggio naturale in ambito clinico, i grandi modelli linguistici, l’IA conversazionale, l’imaging medico, la visione artificiale o i modelli predittivi tabulari.
  • Capacità di esaminare criticamente ricerche tecniche, rapporti di valutazione o studi di validazione e individuare debolezze metodologiche o conclusioni non supportate.
  • Ottime capacità di scrittura analitica e abilità nel comunicare chiaramente risultati complessi a un pubblico non tecnico.
  • Capacità di lavorare in autonomia e contribuire a revisioni e calibrazioni di esperti multidisciplinari.
  • Disponibilità a sottoscrivere accordi di riservatezza, dichiarare conflitti di interesse e completare la formazione per revisori.
  • Esperienza nella valutazione di sistemi di IA o ML in ambito sanitario, nel supporto alle decisioni cliniche, nella salute digitale o in un altro contesto ad alto impatto.
  • Familiarità con quadri di valutazione e rendicontazione dell’IA clinica, come TRIPOD+AI, STARD-AI, CONSORT-AI, DECIDE-AI o le schede dei modelli.
  • Esperienza nella valutazione di IA generativa, sistemi basati su LLM o agenti autonomi, inclusi comportamento su più turni, affidabilità, allucinazioni e salvaguardie.
  • Esperienza nei test di robustezza, nella valutazione avversaria, nel red teaming o nell’analisi sistematica delle modalità di errore.
  • Conoscenza del monitoraggio in produzione, dello spostamento della distribuzione, della deriva dei modelli, del controllo delle versioni e della gestione delle modifiche.
  • Esperienza nella progettazione o valutazione di sistemi con intervento umano o nel confronto tra prestazioni dei modelli e giudizi di esperti umani.
  • Familiarità con le linee guida della FDA sui dispositivi medici abilitati dall’IA, sul supporto alle decisioni cliniche o sul software come dispositivo medico.
  • Esperienza nella conduzione di revisioni tecniche indipendenti, peer review scientifiche, revisioni di finanziamenti o valutazioni tecnologiche formali.
  • Esperienza di collaborazione con professionisti clinici, ricercatori o stakeholder normativi nella valutazione o nell’implementazione dell’IA.

Benefit

  • Incarico a contratto con compenso per ogni revisione.
  • Orientamento per i revisori sul quadro di valutazione e sui requisiti del progetto prima del primo incarico.

Offerte correlate

Volga Partners

Esperto medico per la valutazione di modelli di IA

Volga Partners
1001 – 5000 Dipendenti
Sponsor per visto H1BB2BImpresaIntelligenza artificiale
AUAustraliaCACanadaGBRegno UnitoINIndiaNZNuova ZelandaPHFilippineUSStati Uniti
35 $ – 150 $ / ora
Da remotoContrattoIntermedioSeniorLingua Richiesta: ingleseIntelligenza artificiale

Volga Partners cerca medici, infermieri con formazione avanzata e assistenti medici per valutare l’accuratezza clinica, il ragionamento e la sicurezza dei contenuti medici generati dall’IA. Gli incarichi a distanza, su base progettuale, variano in funzione delle esigenze dei singoli progetti.

Apri