D
Defcon AI ontwikkelt AI-gestuurde software voor logistiek, transport en supplychainactiviteiten. De technologie combineert softwaremodellering en intelligente agents om organisaties te helpen bij het plannen van en reageren op verstoringen door natuurrampen, onverwachte gebeurtenissen en betwiste omstandigheden. Op het snijvlak van kunstmatige intelligentie, mobiliteit en logistiek werkt het bedrijf samen met partners aan datagedreven hulpmiddelen die de operationele veerkracht, besluitvorming en efficiëntie van reacties moeten verbeteren.
Ingenieur voor modeltests en metingen – op afstand in de Verenigde Staten
Defcon AI zoekt een ingenieur voor modeltests en metingen om AI-systemen onafhankelijk te valideren. De functie omvat het ontwikkelen van ground truth, modelaudits, workflowmetingen en bewijs voor verantwoorde beslissingen over vrijgave.
Verenigde Staten$ 150.000 – $ 190.000 / jaar
Op afstandVoltijdMediorSeniorVereiste Taal: EngelsIngenieurBeschrijving
- Gelabelde ground truth opbouwen voor modelevaluatie
- Steekproefsgewijze audits plannen en uitvoeren
- Vrijgaven per modelversie aansturen en tegelijk versie-inventarissen, evaluatieregisters en triggers voor terugdraaien bijhouden
- Modeldrift en override-activiteit beoordelen
- Bewijs ontwikkelen over menselijk toezicht, eerlijkheid en uiteenlopende effecten
- Onafhankelijk blijven van modelbouwteams en evaluatiebewijs leveren zonder modellen te bouwen, drempelwaarden vast te stellen of vrijgaven op basis van dat bewijs goed te keuren
- Workflowverbeteringen meten aan de hand van beoordelingstijd, doorvoer, ontwikkeling van de achterstand, overridepercentages en herstelpercentages
- Kwaliteitscontroles in de evaluatiefase opzetten voor steekproefselectie, beoordelingseenheden en eerlijke vergelijkingen tussen methoden of doorzochte bronnen
- De meetgebeurtenissen specificeren die van andere teams vereist zijn en controleren of de beoordelingswerkruimte workflowgebeurtenissen vanaf het eerste gebruik registreert
- Samenwerken met datawetenschappers, AI-ingenieurs en de technische leiding
- Beslissingen over vrijgave, verbeteringsinitiatieven en klantevaluaties ondersteunen met onafhankelijke beoordelingen
Vereisten
- Minimaal 5 jaar ervaring met modelvalidatie als een duidelijk omschreven verantwoordelijkheid
- Aantoonbare ervaring met het opbouwen van ground truth en het ontwerpen van steekproefmethoden
- Sterke vaardigheden in Python en SQL
- In staat om onafhankelijk te werken van de teams waarvan u de modellen evalueert
- Amerikaans staatsburgerschap vereist
- Actieve Amerikaanse Secret-clearance
- Bereidheid om voor delen van het werk te voldoen aan strengere eisen voor personeelsbeveiliging, zoals tijdens de screening wordt besproken
- Achtergrond in modelrisico binnen een gereguleerde sector of bij de overheid
- Ervaring met het testen van eerlijkheid en uiteenlopende effecten en met het documenteren van menselijk toezicht
- Bekendheid met het NIST AI Risk Management Framework of een vergelijkbare werkwijze
- Actieve Top Secret-clearance
Voordelen
- Concurrerend salaris met bonus en aandelenparticipatie
- Volledig remote, resultaatgerichte werkomgeving
- Door de werkgever betaalde medische, tandheelkundige en oogzorgverzekering voor u en uw gezin
- Onbeperkt betaald verlof met goedkeuring van de manager
- Flexibele werktijden met autonomie over uw werkdag
- 14 weken volledig betaald ouderschapsverlof
- Af en toe reizen naar het hoofdkantoor van DEFCON AI, klantlocaties en partnerlocaties wanneer nodig