mpathic
mpathic
Η mpathic αναπτύσσει λογισμικό ασφάλειας και αναλύσεων με τεχνητή νοημοσύνη για την κατανόηση και τη βελτίωση των αλληλεπιδράσεων ανθρώπων με συστήματα τεχνητής νοημοσύνης, καθώς και των ανθρώπινων αλληλεπιδράσεων. Τα προϊόντα SaaS και τα API της υποστηρίζουν μεταγραφή ομιλίας σε κείμενο, απόκρυψη προσωπικά ταυτοποιήσιμων πληροφοριών, ανάλυση συμπεριφοράς και λιστών ελέγχου, σύνολα δεδομένων συγκριτικής αξιολόγησης, red teaming και δικλίδες ασφαλείας που βασίζονται στον εκάστοτε τομέα μέσω του API Observing Agent. Η εταιρεία εξυπηρετεί τους κλάδους της υγειονομικής περίθαλψης, των βιοεπιστημών, της κλινικής έρευνας και των ασφαλίσεων, καθώς και επιχειρησιακές ομάδες που επιδιώκουν να ενισχύσουν την ενσυναίσθηση, να μειώσουν τις προκαταλήψεις και να υποστηρίξουν ασφαλέστερες και περισσότερο συμμορφούμενες αλληλεπιδράσεις.

Αξιολογητής αξιολόγησης AI/ML στον τομέα της υγείας

Εξέταση τεκμηρίων για εφαρμογές AI στην υγεία στις αξιολογήσεις του mpathic στο ρυθμιστικό sandbox. Αξιολόγηση επικύρωσης μοντέλων, αξιοπιστίας, δικλίδων ασφαλείας και παρακολούθησης για κλινική χρήση.

Περιγραφή

  • Αξιολόγηση τεχνικών τεκμηρίων για εφαρμογές AI στην υγεία, καλύπτοντας την απόδοση, την επικύρωση, τη δυνατότητα γενίκευσης, την αξιοπιστία, την παρακολούθηση και τις δικλίδες ασφαλείας.
  • Εξέταση μεθόδων επικύρωσης, προτύπων αναφοράς, μεγεθών δείγματος, στατιστικών αναλύσεων, μετρικών, λειτουργικών ορίων και αβεβαιότητας.
  • Έλεγχος της ποιότητας και της αντιπροσωπευτικότητας των δεδομένων, συμπεριλαμβανομένης της διαρροής δεδομένων, των διαφορών μεταξύ υποομάδων και της δυνατότητας γενίκευσης σε ομάδες ασθενών και περιβάλλοντα περίθαλψης.
  • Δοκιμή της τεχνικής αξιοπιστίας, της ανθεκτικότητας, της αναπαραγωγιμότητας, των τρόπων αστοχίας και της συμπεριφοράς σε ασυνήθιστες εισόδους ή εισόδους εκτός κατανομής.
  • Εξέταση σχεδίων αξιολόγησης, σημείων αναφοράς και κριτηρίων επιτυχίας για πιλοτικές εφαρμογές.
  • Αξιολόγηση τεχνικών δικλίδων ασφαλείας, διαδικασιών κλιμάκωσης και διαδικασιών ανθρώπινης εποπτείας.
  • Εξέταση σχεδίων παρακολούθησης και διαχείρισης αλλαγών για τον εντοπισμό πτώσης της απόδοσης, την παρακολούθηση της συμπεριφοράς του μοντέλου, τη διαχείριση ενημερώσεων και παρεμβάσεων και τον καθορισμό κριτηρίων επαναφοράς.
  • Συνεργασία με κλινικούς και τεχνικούς ειδικούς για την αντιμετώπιση διεπιστημονικών ζητημάτων.
  • Καταγραφή δυνατών σημείων, περιορισμών, κενών τεκμηρίωσης και τεχνικών προβληματισμών με χρήση του καθιερωμένου πλαισίου αξιολόγησης.
  • Διατύπωση σαφών, τεκμηριωμένων συστάσεων και προσδιορισμός των απαιτούμενων τεκμηρίων ή αλλαγών.
  • Συμμετοχή στη βαθμονόμηση αξιολογητών και στη διασφάλιση ποιότητας.
  • Διατήρηση ανεξαρτησίας και εμπιστευτικότητας, με τήρηση των απαιτήσεων για σύγκρουση συμφερόντων και διαχείριση δεδομένων.

Απαιτήσεις

  • Τουλάχιστον τρία έτη επαγγελματικής εμπειρίας ή εμπειρίας εφαρμοσμένης έρευνας στη μηχανική μάθηση, την επιστήμη δεδομένων, τη βιοστατιστική, την κλινική πληροφορική ή συναφή τομέα, με άμεση εργασία στην αξιολόγηση ή επικύρωση προγνωστικών μοντέλων ή συστημάτων AI.
  • Κατανόηση μεθόδων αξιολόγησης μοντέλων, συμπεριλαμβανομένων κατάλληλων μετρικών απόδοσης, σχεδιασμού επικύρωσης, στατιστικής αβεβαιότητας, επιλογής ορίων και συνηθισμένων πηγών μεροληψίας ή μεθοδολογικού σφάλματος.
  • Εμπειρία στην αξιολόγηση της απόδοσης μοντέλων σε ανεξάρτητα ή δεσμευμένα δεδομένα και στην κρίση του κατά πόσο τα αποτελέσματα γενικεύονται πέρα από το σύνολο δεδομένων αξιολόγησης.
  • Πρακτική εμπειρία στην αξιολόγηση τουλάχιστον ενός σχετικού τύπου συστήματος AI, όπως κλινική επεξεργασία φυσικής γλώσσας, μεγάλα γλωσσικά μοντέλα, συνομιλιακό AI, ιατρική απεικόνιση, υπολογιστική όραση ή μοντέλα πρόβλεψης σε πίνακες δεδομένων.
  • Ικανότητα κριτικής εξέτασης τεχνικής έρευνας, εκθέσεων αξιολόγησης ή μελετών επικύρωσης και εντοπισμού μεθοδολογικών αδυναμιών ή συμπερασμάτων χωρίς επαρκή τεκμηρίωση.
  • Ισχυρές δεξιότητες αναλυτικής γραφής και ικανότητα σαφούς εξήγησης σύνθετων ευρημάτων σε μη τεχνικό κοινό.
  • Ικανότητα ανεξάρτητης εργασίας και συμβολής σε διεπιστημονική αξιολόγηση ειδικών και βαθμονόμηση.
  • Προθυμία ολοκλήρωσης συμφωνιών εμπιστευτικότητας, δηλώσεων σύγκρουσης συμφερόντων και εκπαίδευσης αξιολογητών.
  • Εμπειρία αξιολόγησης συστημάτων AI ή ML στην υγεία, στην υποστήριξη κλινικών αποφάσεων, στην ψηφιακή υγεία ή σε άλλο περιβάλλον υψηλού κινδύνου.
  • Εξοικείωση με πλαίσια αξιολόγησης και αναφοράς κλινικού AI, όπως TRIPOD+AI, STARD-AI, CONSORT-AI, DECIDE-AI ή κάρτες μοντέλων.
  • Εμπειρία αξιολόγησης παραγωγικού AI, συστημάτων που βασίζονται σε μεγάλα γλωσσικά μοντέλα ή αυτόνομων πρακτόρων, συμπεριλαμβανομένης της συμπεριφοράς σε πολλαπλές αλληλεπιδράσεις, της αξιοπιστίας, των παραισθήσεων και των δικλίδων ασφαλείας.
  • Εμπειρία σε δοκιμές ανθεκτικότητας, επιθετική αξιολόγηση, red teaming ή συστηματική ανάλυση τρόπων αστοχίας.
  • Γνώση παρακολούθησης σε περιβάλλον παραγωγής, μετατόπισης κατανομής, απόκλισης μοντέλου, ελέγχου εκδόσεων και διαχείρισης αλλαγών.
  • Εμπειρία στον σχεδιασμό ή την αξιολόγηση συστημάτων με συμμετοχή ανθρώπου ή στη σύγκριση της απόδοσης μοντέλων με κρίσεις ανθρώπινων ειδικών.
  • Εξοικείωση με τις οδηγίες του FDA για ιατροτεχνολογικά προϊόντα με δυνατότητες AI, υποστήριξη κλινικών αποφάσεων ή λογισμικό ως ιατροτεχνολογικό προϊόν.
  • Εμπειρία σε ανεξάρτητες τεχνικές αξιολογήσεις, επιστημονικές αξιολογήσεις από ομοτίμους, αξιολογήσεις επιχορηγήσεων ή επίσημες τεχνολογικές αξιολογήσεις.
  • Εμπειρία συνεργασίας με κλινικούς, ερευνητές ή ρυθμιστικούς φορείς στην αξιολόγηση ή ανάπτυξη AI.

Παροχές

  • Συμβατική εργασία με αμοιβή ανά αξιολόγηση.
  • Ενημερωτική εκπαίδευση αξιολογητών για το πλαίσιο αξιολόγησης και τις απαιτήσεις του έργου πριν από την πρώτη ανάθεση.

Σχετικές θέσεις εργασίας

Gramian Consulting

Ελεγκτής ποιότητας για επισημείωση δεδομένων AI

Gramian Consulting

Ηγείται του ελέγχου ποιότητας δεδομένων εκπαίδευσης AI στην Gramian Consulting. Επιβλέπει ελεγκτές, ελέγχους, ανατροφοδότηση, εκπαίδευση και βελτιώσεις διαδικασιών σε απομακρυσμένες ομάδες έργου.

Άνοιγμα
Mercor

Ειδικός ασφάλειας τεχνητής νοημοσύνης στα αγγλικά

Mercor
51 – 200 Εργαζόμενοι

Εξετάστε συνομιλίες στα αγγλικά και αξιολογήστε απαντήσεις τεχνητής νοημοσύνης για τη Mercor. Ακολουθήστε τις οδηγίες του έργου και παρέχετε δομημένη ανατροφοδότηση για την εκπαίδευση προηγμένων συστημάτων τεχνητής νοημοσύνης.

Άνοιγμα
Mercor

Συμμετέχων σε εξ αποστάσεως έρευνα ανατροφοδότησης χρηστών για βοηθό AI

Mercor
51 – 200 Εργαζόμενοι

Χρησιμοποιήστε το Meta Muse ή το Instinct και αξιολογήστε τα προληπτικά μηνύματά του στο πλαίσιο της μελέτης εκπαίδευσης AI της Mercor. Υποβάλετε εβδομαδιαίες συνομιλίες αφού αφαιρέσετε προσωπικά στοιχεία.

Άνοιγμα
Sigma AI

Γλωσσικός επισημειωτής Καντονέζικων Κινεζικών

Sigma AI

Εργασία εξ αποστάσεως ως ελεύθερος επαγγελματίας στην επισημείωση Καντονέζικων και Αγγλικών για έργα συλλογής δεδομένων της Sigma AI. Οι εργασίες περιλαμβάνουν επισημείωση, απομαγνητοφώνηση, επικύρωση και ηχογράφηση φωνής.

Άνοιγμα
Volga Partners

Ειδικός κλινικής γνώσης για την αξιολόγηση μοντέλων τεχνητής νοημοσύνης

Volga Partners

Η Volga Partners αναζητά ιατρούς, προηγμένους νοσηλευτές και βοηθούς ιατρών για να αξιολογούν την κλινική ακρίβεια, τη συλλογιστική και την ασφάλεια ιατρικού περιεχομένου που παράγεται από τεχνητή νοημοσύνη. Πρόκειται για εξ αποστάσεως συμβάσεις ανά έργο, με μεταβαλλόμενο αντικείμενο ανάλογα με τις ανάγκες του έργου.

Άνοιγμα