Snorkel AI utvecklar expertbaserade datalösningar för maskininlärningsteam. Företagets plattform Expert Data-as-a-Service hjälper organisationer att skapa och utvärdera högkvalitativa träningsdataset, vilket möjliggör snabbare modellutveckling och mer tillförlitliga AI-tillämpningar. Företaget grundades 2019 med utgångspunkt i forskning vid Stanford och samarbetar med organisationer inom konsultverksamhet, hälso- och sjukvård samt logistik för att utveckla praktiska AI-system.
Senior AI- och ML-mjukvaruingenjör på Snorkel AI (hybrid)
Senior/staff maskininlärningsingenjör som förbättrar agentutvärdering, modellrouting och finjusterade modellsystem. Bygg rigorös AI-datainfrastruktur för Snorkel AI:s företagskunder.
USA
Kalifornien208 000 $ – 315 000 $ / år
HybridHeltidSeniorObligatoriskt Språk: engelskaAI-ingenjörMaskininlärningsingenjörBeskrivning
- Förbättra hastigheten, kostnaden och noggrannheten i generering och utvärdering av frontier-AI-data genom ML och AI
- Undersök hur data på frontier-nivå produceras och bedöms
- Utveckla hypoteser och testa dem mot verkliga produktionsdata
- Skala upp metoder som visar starka resultat
- Minska kostnaderna för långsiktig agentutvärdering genom adaptiv sampling, statistiskt grundad tidig avbrytning, modellkaskader, cachning och billig-först-filtrering
- Dirigera utvärderings- och domarförfrågningar till den billigaste modellen som uppfyller kvalitetskraven, med reservlösningar, övervakning och kostnadsallokering
- Finjustera och driftsätt modeller med öppna vikter med LoRA och andra parameter-effektiva tekniker
- Utveckla modeller som förutsäger uppgiftens svårighetsgrad för frontier-system före lansering
- Skapa guldstandarddataset och mät noggrannheten och kalibreringen hos LLM-som-domare-system
- Omvandla forskningsprototyper till återanvändbara, konfigurerbara komponenter för produktionsingenjörer och forskare
- Bidra till att definiera standarder för ML-utveckling, vägleda inriktningen för området och stödja det växande teamet
Krav
- Minst fem års erfarenhet av att bygga maskininlärnings- eller mjukvarusystem för produktion, med ansvar från prototyp till produktion
- Praktisk erfarenhet av att driftsätta LLM- eller ML-arbetsbelastningar i produktion
- Förmåga att effektivt resonera kring icke-deterministiska system
- Stark grund i statistik och experimentering, inklusive experimentdesign, hypotesprövning, sampling och konfidensintervall
- Avancerade kunskaper i Python och mjukvaruutveckling, inklusive testning, kodgranskning och systemdesign
- Erfarenhet av att skapa utvärderingar och tolka resultaten på ett rigoröst sätt
- Förmåga att proaktivt identifiera problem med stor påverkan innan de formellt tilldelas
- Tydlig kommunikation mellan forsknings-, teknik- och affärsteam
Förmåner
- Meningsfulla möjligheter att påverka prioriteringar och initiativ
- Möjlighet att göra sin röst hörd i viktiga strategiska beslut
- Direkt bidrag till Snorkel AI:s fortsatta framgång
- Möjligheter att fördjupa den tekniska kompetensen
- Möjligheter att leda
- Möjligheter att utveckla färdigheter inom flera funktioner
- Stöd för karriärutveckling i en tillväxtorienterad miljö med fokus på lärande och gemensam framgång
- Skäliga anpassningar för sökande och anställda med funktionsnedsättning under ansöknings- och intervjuprocesser, i arbetet samt vid tillgång till anställningsförmåner och andra anställningsrättigheter