CommonAI CIC
CommonAI CIC
CommonAI CIC er et Cambridge-basert community interest company og en ideell medlemsorganisasjon som arbeider for en trygg og ansvarlig utvikling av grunnleggende AI-teknologier. Gjennom sin samarbeidsorienterte ingeniørmodell kobler organisasjonen sammen AI-startups, etablerte virksomheter, offentlige organisasjoner og akademiske team for å dele ressurser, utvikle immaterielle rettigheter og fremme deeptech-AI gjennom styrte programmer, blant annet initiativer med høye krav til sikkerhet og Scaling Inference Lab. Organisasjonen gir medlemmene tilgang til et beskyttet Digital Commons, spesialisert ingeniør- og forskningsekspertise samt kostnadseffektiv datainfrastruktur for styrte prosjekter innen åpen kildekode og forskning. Å jobbe i CommonAI CIC gir mulighet til å bidra til praktisk og samarbeidsorientert arbeid i skjæringspunktet mellom kunstig intelligens, forskning og teknologi til samfunnets beste.

Ingeniør for maskinlæringssystemer, benchmarking av inferens

Bygg reproduserbare benchmarktester for LLM-tjenester som del av CommonAI sin forskning på AI-infrastruktur i Storbritannia. Evaluer arbeidsbelastninger med lang kontekst og agentbaserte oppgaver på fysiske systemer og i simuleringer.

Beskrivelse

  • Opprette og vedlikeholde reproduserbare arbeidsbelastninger, konfigurasjoner og benchmarkverktøy for LLM-tjenester
  • Bygge arbeidsbelastninger med lang kontekst og agentbaserte oppgaver med egnet eksisterende programvare
  • Karakterisere forespørselsmønstre, prompt- og utdatalengder, hurtigbufring, batching, verktøybruk og avhengigheter mellom forespørsler
  • Fastsette ytelsesmål sammen med krav til applikasjonskvalitet og tjenester
  • Samarbeide med måleingeniører om å gjenskape arbeidsbelastninger på fysiske systemer
  • Samarbeide med simulatoringeniører om å representere arbeidsbelastninger samtidig som viktige egenskaper og avhengigheter bevares
  • Vurdere hvordan endringer i arbeidsbelastninger og konfigurasjoner for tjenestekjøring påvirker konklusjonene
  • Holde benchmarktester oppdaterte etter hvert som inferensteknologi og arbeidsbelastninger endres
  • Dokumentere datasett, modell- og programvareversjoner, konfigurasjoner, proveniens og tillatte bruksområder
  • Sammenligne ytelsen til arbeidsbelastninger på tvers av systemer ut fra avtalte krav til applikasjonskvalitet og tjenester
  • Hjelpe ingeniører og investorer med å forstå infrastrukturvalg for bestemte applikasjoner

Krav

  • Erfaring med å bygge eller evaluere maskinlæringssystemer, inferenstjenester, ytelsesbenchmarktester eller lignende arbeidsbelastningsdrevne systemer
  • Gode praktiske programvareferdigheter for å bygge pålitelige benchmarkverktøy, analysere resultater og feilsøke samspillet mellom applikasjon og infrastruktur
  • Forståelse av LLM-inferens og interesse for hvordan valg av tjenesteløsning påvirker ytelse og utdatakvalitet
  • Nøyaktighet ved utforming av reproduserbare sammenligninger og tolkning av resultater opp mot oppgitte applikasjonskrav
  • Praktisk erfaring med AI-kodeagenter og godt skjønn ved validering av generert kode, datatransformasjoner og evalueringer
  • Erfaring med vLLM, SGLang eller lignende programvare for tjenestekjøring, arbeidsbelastninger med lang kontekst, agentbaserte applikasjoner, sporingsanalyse eller kvalitetsvurdering er en fordel
  • Evne til å jobbe med LLM-tjenester; andre former for inferens kan bli aktuelle senere
  • Relevant videreutdanning er nyttig, men erfaring og kvaliteten på arbeidet teller mer enn formelle kvalifikasjoner
  • Må være basert i Storbritannia eller møte i Cambridge etter avtale for hybridarbeid

Fordeler

  • Konkurransedyktig lønnspakke med pensjon og goder
  • Muligheter for faglig utvikling
  • Nettverksbygging med innflytelsesrike personer innen teknologi og akademia
  • Betydelig verktøybudsjett for avanserte modeller og kodeagenter
  • Samarbeidsorientert og støttende arbeidsplass
  • Mulighet til å bidra vesentlig i en voksende organisasjon
  • Livlig kontor nær Cambridge jernbanestasjon
  • Hybridarbeid med oppmøte i Cambridge etter individuell avtale
  • Fast stilling, deltidsarbeid og konsulentoppdrag tilbys
  • Fleksibel startdato
  • Inkluderende og mangfoldig arbeidsplass

Relaterte jobber

Aurora Energy Research

Senior programvareingeniør innen AI

Aurora Energy Research

Led utviklingen av autonome LLM-systemer som støtter beslutninger i energimarkedet hos Aurora Energy Research, som leverer skyprogramvare for å følge og modellere strømnett. Led team og lever agentbaserte systemer fra de første brukersamtalene til produksjon.

Åpne