시니어 머신러닝 엔지니어, 런던 하이브리드 근무
Scarlet의 의료기기 인증 업무를 위한 에이전트형 문서 이해 시스템을 구축하고 배포합니다. 안전성과 증거의 무결성을 지키면서 인증을 가속하는 평가 기반 머신러닝 시스템을 개발합니다.
설명
- 기술 문서를 검색하고 파싱하며 시각적으로 검사하는 에이전트형 문서 이해 시스템을 설계합니다
- 다양한 대규모 문서 컬렉션에서 정보를 검색하는 에이전트 하니스를 구축합니다
- 정확도, 지연 시간, 비용의 균형을 유지하면서 출처를 명확히 표시하고 환각을 줄입니다
- 에이전트 기반 시스템을 프로덕션 환경에 배포합니다
- 평가 담당자와 협력해 복잡한 분야의 성공 기준을 정의하고 데이터 세트와 벤치마크를 만듭니다
- 검색 품질, 인용 정확도, 전문가 간 일치도, 평가 담당자의 업무량, 평가 품질, 고객 경험, 재작업을 평가합니다
- 평가 결과를 활용해 개선 우선순위를 정합니다
- 인증 기관에 요구되는 공정성과 객관성을 유지하는 에이전트를 개발합니다
- 사용자가 증거를 해석하고 불확실성을 식별하도록 지원하며 중대한 의사결정에 대한 책임을 유지합니다
- 머신러닝 시스템을 개념과 프로토타입 단계부터 배포, 평가, 지속적인 개선까지 이끕니다
- 임상의, 평가 담당자, 엔지니어와 협력해 안전성을 낮추지 않으면서 의료기기 인증을 가속합니다
지원 자격
- 프로덕션 환경에 소프트웨어를 제공한 경력이 3년 이상입니다
- 딥러닝, 에이전트 도구, 컨텍스트 관리, 정보 검색에 대한 실무 지식이 있습니다
- 머신러닝 평가용 데이터 세트를 만든 경험이 있습니다
- 통계학과 머신러닝 시스템 평가를 제1원리부터 깊이 이해합니다
- 프로덕션 시스템을 설계, 배포, 운영한 경험이 있습니다
- 데이터 접근, 권한, 신뢰할 수 없는 입력, 중대한 작업을 포함한 프로덕션 보안에 대해 실질적인 판단력을 갖추고 있습니다
- 업무량에 맞는 인프라를 선택하고 복잡성, 안정성, 보안, 비용 간의 트레이드오프를 설명할 수 있습니다
- 도메인 전문가와 성공 기준을 정의하는 단계부터 실험과 프로덕션 개선까지 모호한 문제를 주도적으로 해결할 수 있습니다
- 우대: 도구 사용, 민감한 데이터 또는 중대한 작업이 포함된 에이전트 시스템을 평가 및 안전장치와 함께 배포한 경험이 있습니다
- 우대: 복잡한 원천 증거와 대조해 출력을 검증해야 하는 검색 또는 문서 이해 시스템을 구축한 경험이 있습니다
- 근무 세션 동안 런던 사무실에서 근무할 수 있습니다
복리후생
- 주식 보상
- 근무 세션과 면접이 채용 절차에 포함됩니다
