D
Defcon AI udvikler AI-drevet software til logistik, transport og forsyningskædedrift. Teknologien kombinerer softwaremodellering og intelligente agenter for at hjælpe organisationer med at planlægge og håndtere forstyrrelser forårsaget af naturkatastrofer, uventede hændelser og omstridte forhold. Virksomheden arbejder i krydsfeltet mellem kunstig intelligens, mobilitet og logistik og samarbejder med partnere om at levere datadrevne værktøjer, der er udviklet til at styrke den operationelle robusthed, beslutningstagningen og effektiviteten i indsatsen.
Ingeniør i modeltest og måling – fjernarbejde i USA
Defcon AI søger en ingeniør i modeltest og måling, der selvstændigt validerer AI-systemer. Rollen omfatter udvikling af ground truth, modelrevisioner, måling af arbejdsgange og dokumentation til ansvarlige beslutninger om produktionssætning.
Beskrivelse
- Opbyg mærkede ground truth-data til modelevaluering
- Planlæg og gennemfør stikprøvebaserede revisioner
- Styr produktionssætninger efter modelversion, og vedligehold samtidig versionsregistre, evalueringsdata og udløsere for tilbagerulning
- Gennemgå modeldrift og aktivitet med manuelle tilsidesættelser
- Udarbejd dokumentation om menneskeligt tilsyn, retfærdighed og uforholdsmæssige effekter
- Forbliv uafhængig af modeludviklingsteams, og lever evalueringsdokumentation uden at bygge modeller, fastsætte tærskler eller godkende produktionssætninger på baggrund af denne dokumentation
- Mål forbedringer af arbejdsgange gennem gennemgangstid, gennemløb, ændringer i sagsbunker, andel af manuelle tilsidesættelser og andel af omarbejde
- Etabler kvalitetskontroller i evalueringsfasen for udvælgelse af stikprøver, gennemgangsenheder og fair sammenligninger på tværs af metoder eller søgte kilder
- Angiv de målingshændelser, der kræves fra andre teams, og verificer, at gennemgangsarbejdsområdet registrerer arbejdsgangshændelser fra den første anvendelse
- Samarbejd med data scientists, AI-ingeniører og teknisk ledelse
- Understøt beslutninger om produktionssætning, forbedringsinitiativer og kundeevalueringer gennem uafhængige vurderinger
Krav
- Mindst 5 års erfaring med modelvalidering som et defineret ansvarsområde
- Praktisk erfaring med at konstruere ground truth og designe stikprøvemetoder
- Stærke færdigheder i Python og SQL
- Evne til at arbejde uafhængigt af de teams, hvis modeller du evaluerer
- Amerikansk statsborgerskab er påkrævet
- Aktiv amerikansk Secret-sikkerhedsgodkendelse
- Villighed til at opfylde skærpede personalesikkerhedskrav for dele af arbejdet, som drøftes under screeningen
- Baggrund inden for modelrisiko i regulerede brancher eller myndigheder
- Erfaring med at teste retfærdighed og uforholdsmæssige effekter samt dokumentere menneskeligt tilsyn
- Kendskab til NIST's rammeværk for AI-risikostyring eller en sammenlignelig praksis
- Aktiv Top Secret-sikkerhedsgodkendelse
Fordele
- Konkurrencedygtig løn med bonus og aktier
- Fuldt fjernbaseret, resultatorienteret arbejdsmiljø
- Arbejdsgiverbetalt læge-, tandlæge- og synsdækning for dig og din familie
- Ubegrænset betalt frihed med lederens godkendelse
- Fleksibel planlægning med selvstændighed over din arbejdsdag
- 14 ugers fuldt betalt forældreorlov
- Lejlighedsvis rejse til DEFCON AI's hovedkvarter, kundelokationer og partnerfaciliteter efter behov