Mindrift ist ein Talent-Marktplatz und eine SaaS-Plattform für künstliche Intelligenz, die professionelle Mitwirkende und Fachexperten mit Projekten von Technologieunternehmen zur Schulung und Bewertung von KI verbindet. Als Teil von Toloka arbeitet Mindrift mit Autoren, Redakteuren, QA-Spezialisten, Wissenschaftlern und weiteren Fachexperten zusammen, die Trainingsdaten erstellen, die Sicherheit und Schlussfolgerungsfähigkeit von Modellen beurteilen, die Qualität von Medien bewerten und realitätsnahe Szenarien zur Verbesserung der Leistung und Zuverlässigkeit von KI entwickeln. Mindrift rekrutiert und prüft Mitwirkende durch Assessments und Identitätsverifizierung und bietet anschließend flexible, vergütete Projektmöglichkeiten in den Bereichen KI-Training und -Bewertung.
Remote Clinical AI Evaluator (MD/DO)
Ärztinnen und Ärzte mit Wohnsitz in den USA prüfen Fälle aus elektronischen Patientenakten und klinische Begründungen, um die Leistung von KI zu bewerten. Das Projekt umfasst Benchmarks zu Diagnose und Behandlung. Während aktiver Phasen fallen voraussichtlich 10–20 Arbeitsstunden pro Woche an.
Beschreibung
- Prüfen Sie Fallvignetten aus elektronischen Patientenakten, Fragen, Antwortvorschläge und Ablenkungsantworten zu Diagnose- und Behandlungsaufgaben.
- Bewerten Sie Fälle aus den Bereichen Herz-Kreislauf, Nervensystem, Blut, Atmung, Verdauung, Harnwege, Fortpflanzung, Bewegungsapparat und Haut.
- Bewerten Sie die klinische Begründung, die Richtigkeit und Vollständigkeit des Falls, die Korrektheit und Bewertbarkeit der Antworten sowie die Qualität der Ablenkungsantworten.
- Prüfen Sie, ob sich jede Schlussfolgerung aus den Angaben in der Fallvignette ergibt.
- Überarbeiten Sie Begründungsschritte und verfassen Sie kurze Erläuterungen.
- Führen Sie drei unabhängige, verblindete Prüfungen durch; anschließend erfolgt eine ärztliche Schlichtung.
- Bearbeiten Sie Projektaufgaben während aktiver Phasen, voraussichtlich 10–20 Stunden pro Woche.
Anforderungen
- Sie sind eine in den USA ansässige, aktiv praktizierende Ärztin oder ein aktiv praktizierender Arzt mit MD- oder DO-Abschluss.
- Sie verfügen über eine aktive, uneingeschränkte US-amerikanische Approbation, die von der zuständigen Zulassungsbehörde überprüft wird.
- Sie sind fachärztlich zertifiziert oder haben eine Facharztausbildung abgeschlossen.
- Sie haben aktuelle direkte Erfahrung in der Patientenversorgung; Erfahrung auf Facharztniveau ist bevorzugt.
- Sie bringen breite Diagnose- und Behandlungserfahrung in mehreren Organsystemen mit, etwa in der Inneren Medizin, Allgemeinmedizin, Notfallmedizin oder Krankenhausmedizin.
- Sie verfügen über ausgeprägte klinische Beurteilungsfähigkeit bei Differenzialdiagnosen, den nächsten Behandlungsschritten und der Anwendung evidenzbasierter Leitlinien.
- Erfahrung mit der Bewertung medizinischer KI, der Prüfung klinischer Inhalte oder Prüfungsfragen sowie medizinischer Annotation oder Qualitätssicherung ist von Vorteil.
- Sie beherrschen schriftliches Englisch sicher (C1 oder höher).
- Diese Position eignet sich nicht für Medizinstudierende, approbationslose Medizinabsolventinnen und -absolventen, nichtärztliche klinische Fachkräfte oder nichtklinisches Gesundheitspersonal.
- Reichen Sie einen englischsprachigen Lebenslauf ein und geben Sie Ihre Englischkenntnisse an.
- Halten Sie Aufgabenfristen und die angegebenen Abnahmekriterien ein.
Zusatzleistungen
- Die Mitarbeit erfolgt projektbasiert.
- Die Projekte sind Teilzeit und nicht dauerhaft angelegt.
- Die Vergütung erfolgt pro angenommener Aufgabe und beträgt je nach Qualifikationsstufe und Bearbeitungseffizienz bis zu einem Gegenwert von 130 US-Dollar pro Stunde.