Snorkel AI
Snorkel AI
Snorkel AI ontwikkelt dataoplossingen voor teams die zich bezighouden met machine learning. Het Expert Data-as-a-Service-platform helpt organisaties hoogwaardige trainingsdatasets te creëren en te evalueren, zodat modellen sneller kunnen worden ontwikkeld en betrouwbaardere AI-toepassingen mogelijk worden. Het bedrijf werd in 2019 opgericht vanuit onderzoek aan Stanford en werkt samen met organisaties in de consultancy, gezondheidszorg en logistiek om praktische AI-systemen verder te ontwikkelen.

Senior software-engineer voor AI en machine learning bij Snorkel AI (hybride functie)

Senior/Staff-engineer voor machine learning die agent-evaluatie, modelroutering en systemen met fijn afgestemde modellen verbetert. Bouw een robuuste AI-datainfrastructuur voor de zakelijke klanten van Snorkel AI.

Beschrijving

  • Verbeter de snelheid, kosten en grondigheid van het genereren en evalueren van data voor geavanceerde AI met ML en AI
  • Onderzoek hoe data van topniveau wordt geproduceerd en beoordeeld
  • Ontwikkel hypotheses en test deze met echte productiedata
  • Schaal aanpakken die sterke resultaten laten zien
  • Verlaag de kosten van langlopende agent-evaluaties met adaptieve sampling, statistisch onderbouwde vroegtijdige stopcriteria, modelcascades, caching en een goedkope eerste selectie
  • Stuur evaluatie- en beoordelingsverzoeken naar het goedkoopste model dat aan de kwaliteitsnormen voldoet, met fallbacks, monitoring en kostentoewijzing
  • Fine-tune open-gewichtmodellen en zet ze in met LoRA en andere parameterzuinige technieken
  • Ontwikkel modellen die de taakmoeilijkheid voor geavanceerde systemen voorspellen voordat deze worden uitgerold
  • Maak gouden datasets en meet de nauwkeurigheid en kalibratie van LLM-as-judge-systemen
  • Zet onderzoeksprototypes om in herbruikbare, configureerbare componenten voor productie-engineers en onderzoekers
  • Help ML-engineeringstandaarden te definiëren, geef richting aan het vakgebied en ondersteun het groeiende team

Vereisten

  • Minimaal vijf jaar ervaring met het bouwen van productieklare machine-learning- of softwaresystemen, met verantwoordelijkheid van prototype tot productie
  • Praktische ervaring met het uitvoeren van LLM- of ML-workloads in productie
  • Vermogen om niet-deterministische systemen effectief te analyseren
  • Sterke basis in statistiek en experimenten, waaronder experimenteel ontwerp, hypothesetoetsing, sampling en betrouwbaarheidsintervallen
  • Gevorderde kennis van Python en software-engineering, waaronder testen, codebeoordeling en systeemontwerp
  • Ervaring met het opzetten van evaluaties en het rigoureus interpreteren van de resultaten
  • Vermogen om proactief problemen met grote impact te signaleren voordat ze formeel worden toegewezen
  • Duidelijke communicatie met onderzoeks-, engineering- en bedrijfsteams

Voordelen

  • Betekenisvolle mogelijkheden om prioriteiten en initiatieven te beïnvloeden
  • Een stem in belangrijke strategische beslissingen
  • Directe bijdrage aan het blijvende succes van Snorkel AI
  • Mogelijkheden om technische diepgang te ontwikkelen
  • Mogelijkheden om leiding te geven
  • Kansen om vaardigheden binnen meerdere functies te ontwikkelen
  • Ondersteuning bij loopbaanontwikkeling in een groeigerichte omgeving die gericht is op leren en gezamenlijk succes
  • Redelijke aanpassingen voor sollicitanten en medewerkers met een beperking gedurende sollicitatie- en sollicitatiegesprekken, bij de uitvoering van het werk en bij de toegang tot arbeidsvoorwaarden en werkgerelateerde privileges