Snorkel AI
Snorkel AI
Snorkel AI udvikler ekspertbaserede dataløsninger til maskinlæringsteams. Virksomhedens platform Expert Data-as-a-Service hjælper organisationer med at skabe og evaluere træningsdatasæt af høj kvalitet, hvilket understøtter hurtigere modeludvikling og mere pålidelige AI-applikationer. Virksomheden blev grundlagt i 2019 med udgangspunkt i forskning fra Stanford og samarbejder med organisationer inden for rådgivning, sundhedspleje og logistik om at udvikle praktiske AI-systemer.

Senior AI- og ML-softwareingeniør hos Snorkel AI (hybrid)

Senior/staff-maskinlæringsingeniør, der forbedrer agentevaluering, modelrouting og finjusterede modelsystemer. Byg robust AI-datainfrastruktur til Snorkel AIs erhvervskunder.

Beskrivelse

  • Forbedr hastigheden, omkostningerne og stringensen i generering og evaluering af frontier-AI-data gennem ML og AI
  • Undersøg, hvordan data på frontier-niveau produceres og vurderes
  • Udvikl hypoteser, og test dem mod reelle produktionsdata
  • Skalér metoder, der viser stærke resultater
  • Reducer omkostningerne ved langsigtet agentevaluering gennem adaptiv sampling, statistisk funderet tidlig stopning, modelkaskader, caching og billigst-først-filtrering
  • Dirigér evaluerings- og dommerforespørgsler til den billigste model, der opfylder kvalitetsstandarderne, med fallback-løsninger, overvågning og omkostningsallokering
  • Finjustér og implementér modeller med åbne vægte ved hjælp af LoRA og andre parameter-effektive teknikker
  • Udvikl modeller, der forudsiger opgavers sværhedsgrad for frontiersystemer før udrulning
  • Opret guldstandard-datasæt, og mål nøjagtigheden og kalibreringen af LLM-som-dommer-systemer
  • Omdan forskningsprototyper til genanvendelige, konfigurerbare komponenter for produktionsingeniører og forskere
  • Bidrag til at definere standarder for ML-engineering, sæt retning for fagområdet, og støt det voksende team

Krav

  • Mindst fem års erfaring med at bygge maskinlærings- eller softwaresystemer til produktion med ansvar fra prototype til produktion
  • Praktisk erfaring med at drive LLM- eller ML-arbejdsbelastninger i produktion
  • Evne til effektivt at ræsonnere om ikke-deterministiske systemer
  • Stærkt fundament i statistik og eksperimentering, herunder eksperimentdesign, hypotesetest, sampling og konfidensintervaller
  • Avancerede Python- og software-engineeringfærdigheder inden for testning, code review og systemdesign
  • Erfaring med at skabe evalueringer og fortolke resultaterne stringent
  • Proaktiv identifikation af problemer med stor effekt, før de formelt tildeles
  • Klar kommunikation på tværs af forsknings-, engineering- og forretningsteams

Fordele

  • Meningsfulde muligheder for at påvirke prioriteter og initiativer
  • En stemme i vigtige strategiske beslutninger
  • Direkte bidrag til Snorkel AIs fortsatte succes
  • Muligheder for at udbygge den tekniske dybde
  • Muligheder for at lede
  • Muligheder for at udvikle færdigheder på tværs af flere funktioner
  • Støtte til karriereudvikling i et vækstorienteret miljø med fokus på læring og fælles succes
  • Rimelige tilpasninger for ansøgere og medarbejdere med handicap gennem ansøgnings- og interviewprocesser, i forbindelse med arbejdsudførelse samt ved adgang til ansættelsesgoder og -rettigheder

Relaterede job