Sciforium
Sciforium
Sciforium은 프로덕션 멀티모달 애플리케이션을 위한 서버리스 도구를 구축하는 인공지능 인프라 기업입니다. 통합된 OpenAI 호환 API를 통해 팀은 텍스트, 이미지, 동영상, 오디오 서비스와 함께 모델 호스팅, 모델 라이브러리, 실시간 평가 파이프라인, 관리형 에이전트 배포 기능을 이용할 수 있습니다. Sciforium은 AMD GPU 하드웨어를 수직 통합해 운영하며, 예측 가능한 성능과 낮은 비용, 향상된 개인정보 보호를 바탕으로 팀이 AI 시스템을 개발하고 평가하고 배포할 수 있도록 지원하는 데 주력합니다.

파운데이션 모델 데이터 엔지니어

Sciforium의 멀티모달 AI 모델을 위한 페타바이트 규모의 사전 학습 및 사후 학습 데이터세트를 구축합니다. 언어, 비전, 동영상 학습용 고성능 데이터 파이프라인을 개발합니다.

설명

  • 대규모 언어 모델의 사전 학습 데이터세트를 처음부터 끝까지 구축합니다.
  • 웹, 코드, 도서, 기술 논문 데이터를 선별하고 균형 있게 구성해 후속 모델 성능을 높입니다.
  • 페타바이트 규모의 비정형 데이터를 정제하고 중복을 제거하며 유의미한 신호를 추출하는 파이프라인을 만듭니다.
  • 지도 미세 조정 지침, 다중 턴 대화, RLHF/DPO 선호도 데이터를 포함한 사후 학습 데이터세트 개발을 주도합니다.
  • 비전 및 동영상 데이터의 수집과 처리를 총괄합니다.
  • 멀티프로세싱과 멀티스레딩을 활용해 처리량이 높은 Python 데이터 처리 스크립트를 작성합니다.
  • 학습 코퍼스를 통계적으로 분석해 편향, 지식 공백, 품질 저하를 찾아냅니다.
  • 자연 수집 데이터세트의 공백을 메우는 합성 데이터 파이프라인을 구축합니다.
  • 멀티모달 정렬, 동영상 압축, 시간적 일관성 문제를 해결합니다.

지원 자격

  • 데이터 과학 또는 머신러닝 분야에서 5년 이상의 업계 경력.
  • 파운데이션 모델용 데이터세트를 구축하고 관리한 경험.
  • 멀티프로세싱, 멀티스레딩, 효율적인 메모리 관리를 포함한 고급 Python 역량.
  • 프로덕션 대규모 언어 모델 또는 대규모 비전 모델을 위한 페타바이트 규모 데이터세트 작업 경험.
  • 원시 웹 크롤링 데이터와 전문 분야 데이터를 사용해 대규모 LLM 학습 데이터세트를 처음부터 만든 경험.
  • RLHF, DPO, 다중 턴 지시 따르기 데이터세트를 구축한 실무 경험.
  • 사람이 수행하는 라벨링 워크플로와 고품질 골드 스탠더드 데이터세트를 관리한 경험.
  • 대규모 데이터용 Spark, Ray, WebDataset, Parquet 또는 이에 준하는 프레임워크와 형식에 대한 높은 숙련도.
  • 대규모 이미지 또는 동영상 데이터세트를 처음부터 구축한 경험 우대.
  • 멀티모달 크롤링, 동영상 처리, 코덱, 압축에 대한 지식 우대.
  • 추론, 코딩, 수학 벤치마크를 위한 복잡한 라벨링 스키마 설계 경험 우대.
  • 데이터 중심 AI 또는 정보 검색에 중점을 둔 정량 분야 석사 또는 박사 학위 우대.
  • 미국에서 합법적으로 근무할 수 있는 자격.

복리후생

  • 의료, 치과, 안과 보험.
  • 401(k) 플랜.
  • 매일 점심, 간식, 음료 제공.
  • 유연한 휴가.
  • 경쟁력 있는 급여.
  • 지분 보상.

관련 채용공고

Verana Health

시니어/스태프 백엔드 엔지니어, 플랫폼 및 데이터 수집

Verana Health

Verana Health에서 임상 데이터 수집, OCR, OpenSearch 및 종양학 플랫폼 서비스를 구축하고 확장합니다. 실제 의료 데이터 인사이트를 지원하는 API, ETL 파이프라인 및 마이크로서비스를 설계합니다.

열기
Berkshire Hathaway Homestate Companies - Workers Compensation Division

시니어 데이터 플랫폼 엔지니어링 매니저

Berkshire Hathaway Homestate Companies - Workers Compensation Division
501 – 1,000 직원
B2B금융보험

보험사의 전사 데이터 플랫폼과 엔지니어링 팀, 운영을 총괄합니다. Azure, SQL, NoSQL 및 분석 플랫폼의 신뢰성, 자동화, 규정 준수와 플랫폼 전략을 담당합니다.

열기
Berkshire Hathaway Homestate Companies - Workers Compensation Division

시니어 데이터 플랫폼 엔지니어링 매니저

Berkshire Hathaway Homestate Companies - Workers Compensation Division
501 – 1,000 직원
B2B금융보험

Berkshire Hathaway Homestate Companies의 보험 운영을 지원하는 데이터 플랫폼 엔지니어링 팀을 이끕니다. 데이터베이스 및 분석 플랫폼, 클라우드 인프라, 자동화, 신뢰성, 인력 관리를 담당합니다.

열기