mpathic
mpathic
mpathic разработва софтуер за безопасност и анализ на изкуствения интелект с цел разбиране и подобряване на взаимодействията между хората и изкуствения интелект, както и на взаимодействията между хората. Нейните SaaS продукти и API интерфейси поддържат транскрипция на реч в текст, заличаване на лични идентифициращи данни, анализ на поведението и контролни списъци, сравнителни набори от данни, red teaming и защитни механизми, съобразени с конкретната област, чрез нейния Observing Agent API. Компанията обслужва екипи в здравеопазването, науките за живота, клиничните изследвания, застраховането и корпоративния сектор, които работят за укрепване на емпатията, намаляване на предубедеността и създаване на по-безопасни взаимодействия в съответствие с нормативните изисквания.

Рецензент за оценяване на здравен AI/ML

Преглеждайте доказателства за AI приложения в здравеопазването в рамките на регулаторните оценки в sandbox средата на mpathic. Оценявайте валидирането на модели, надеждността, предпазните мерки и мониторинга за клинична употреба.

Описание

  • Оценявайте технически доказателства за AI приложения в здравеопазването, включително ефективност, валидиране, обобщаемост, надеждност, мониторинг и предпазни мерки.
  • Преглеждайте методите за валидиране, референтните стандарти, размера на извадките, статистическите анализи, показателите, оперативните прагове и неопределеността.
  • Изследвайте качеството и представителността на данните, включително изтичане на данни, разлики между подгрупи и обобщаемост сред различни групи пациенти и лечебни заведения.
  • Тествайте техническата надеждност, устойчивостта, възпроизводимостта, режимите на отказ и поведението при нетипични входни данни или данни извън разпределението.
  • Преглеждайте планове за оценяване, сравнителни показатели и критерии за успех при пилотни внедрявания.
  • Оценявайте техническите предпазни мерки, пътищата за ескалация и процесите за човешки надзор.
  • Преглеждайте планове за мониторинг и управление на промените за откриване на спад в ефективността, проследяване на поведението на модела, управление на актуализации и намеси и определяне на критерии за връщане към предишна версия.
  • Работете с клиницисти и технически специалисти по въпроси, засягащи различни дисциплини.
  • Записвайте силните страни, ограниченията, пропуските в доказателствата и техническите опасения чрез стандартната рамка за преглед.
  • Давайте ясни препоръки, основани на доказателства, и посочвайте необходимите доказателства или промени.
  • Участвайте в калибрирането на рецензентите и осигуряването на качеството.
  • Запазвайте независимост и поверителност и спазвайте изискванията за конфликт на интереси и обработка на данни.

Изисквания

  • Най-малко три години професионален опит или опит в приложни изследвания в машинното обучение, науката за данните, биостатистиката, клиничната информатика или сродна област, включително пряка работа по оценяване или валидиране на прогнозни модели или AI системи.
  • Познаване на методите за оценяване на модели, включително подходящи показатели за ефективност, дизайн на валидирането, статистическа неопределеност, избор на прагове и често срещани източници на пристрастие или методологични грешки.
  • Опит в оценяването на ефективността на модели върху независими или отделени за тестване данни и преценяване дали резултатите се обобщават отвъд набора от данни за оценяване.
  • Практически опит в оценяването на поне един подходящ тип AI система, например клинична обработка на естествен език, големи езикови модели, разговорен AI, медицински изображения, компютърно зрение или прогнозни модели върху таблични данни.
  • Умение за критичен преглед на технически изследвания, доклади за оценяване или проучвания за валидиране и откриване на методологични слабости или неподкрепени заключения.
  • Силни аналитични умения за писане и способност за ясно обясняване на сложни констатации пред нетехническа аудитория.
  • Способност за самостоятелна работа и принос към мултидисциплинарни експертни прегледи и калибриране.
  • Готовност за подписване на споразумения за поверителност, подаване на декларации за конфликт на интереси и преминаване на обучение за рецензенти.
  • Опит в оценяването на AI или ML системи в здравеопазването, подкрепата за клинични решения, дигиталното здраве или друга среда с висок риск.
  • Познаване на рамки за оценяване и докладване на клиничен AI, като TRIPOD+AI, STARD-AI, CONSORT-AI, DECIDE-AI или карти на модели.
  • Опит в оценяването на генеративен AI, системи, базирани на LLM, или автономни агенти, включително поведение в многоетапни разговори, надеждност, халюцинации и предпазни мерки.
  • Опит с тестване на устойчивостта, адверсариално оценяване, red teaming или систематичен анализ на режимите на отказ.
  • Познания за мониторинг в продукционна среда, промяна на разпределението, дрейф на модели, контрол на версиите и управление на промените.
  • Опит в проектиране или оценяване на системи с участие на човек или сравняване на ефективността на модели с преценките на човешки експерти.
  • Познаване на насоките на FDA за медицински изделия с AI, подкрепа за клинични решения или софтуер като медицинско изделие.
  • Опит в независими технически прегледи, научно рецензиране, прегледи на грантове или формални оценки на технологии.
  • Опит в работата с клиницисти, изследователи или регулаторни заинтересовани страни по оценяване или внедряване на AI.

Придобивки

  • Договорна работа с плащане за всеки преглед.
  • Въвеждащо обучение за рецензенти относно рамката за оценяване и изискванията на проекта преди първото възлагане.

Свързани работни места

Gramian Consulting

Рецензент по качеството на анотирането на данни за ИИ

Gramian Consulting

Ръководи проверката на качеството на данните за обучение на ИИ в Gramian Consulting. Наблюдава рецензенти, одити, обратна връзка, обучения и подобряване на процесите в дистанционни проектни екипи.

Отвори
Mercor

Специалист по безопасност на изкуствения интелект – английски език

Mercor
51 – 200 Служители

Преглеждайте разговори на английски език и оценявайте отговори на изкуствения интелект за Mercor. Следвайте указанията по проекта и предоставяйте структурирана обратна връзка в подкрепа на обучението на най-съвременни системи с изкуствен интелект.

Отвори
Mercor

Участник в проучване на обратната връзка от потребители на отдалечен AI асистент

Mercor
51 – 200 Служители

Използвайте Meta Muse или Instinct и оценявайте проактивните му съобщения като част от проучване на Mercor за обучение на AI. Всяка седмица изпращайте разговорите, след като премахнете личните данни.

Отвори
Sigma AI

Лингвистичен анотатор за кантонски китайски

Sigma AI

Работете дистанционно като външен анотатор по кантонски и английски език в проекти на Sigma AI за събиране на данни. Задачите включват анотиране, транскрипция, проверка и гласови записи.

Отвори
Volga Partners

Медицински експерт за оценка на модели с изкуствен интелект

Volga Partners

Volga Partners търси лекари, медицински сестри с разширена практика и лекарски асистенти, които да оценяват клиничната точност, разсъжденията и безопасността на медицинско съдържание, генерирано от изкуствен интелект. Работата е дистанционна и по проектни договори, като ангажиментите се различават според нуждите на проекта.

Отвори