D
Defcon AI développe des logiciels fondés sur l’intelligence artificielle pour les opérations de logistique, de transport et de chaîne d’approvisionnement. Sa technologie associe la modélisation logicielle et des agents intelligents afin d’aider les organisations à planifier et à réagir aux perturbations causées par des catastrophes naturelles, des événements imprévus et des situations de conflit. À la croisée de l’intelligence artificielle, de la mobilité et de la logistique, l’entreprise collabore avec des partenaires pour proposer des outils fondés sur les données, conçus pour renforcer la résilience opérationnelle, la prise de décision et l’efficacité des interventions.
Ingénieur en tests et mesures de modèles – Télétravail aux États-Unis
Defcon AI recherche un ingénieur en tests et mesures de modèles pour valider indépendamment des systèmes d’IA. Le poste couvre la constitution de données de référence, les audits de modèles, la mesure des flux de travail et la production d’éléments probants pour des décisions de mise en production responsables.
États-Unis150 000 $ – 190 000 $ / an
À distanceTemps pleinIntermédiaireSeniorLangue Requise : anglaisIngénieurDescription
- Constituer des données de référence annotées pour l’évaluation des modèles
- Planifier et réaliser des audits par échantillonnage
- Contrôler les mises en production par version de modèle tout en tenant les inventaires de versions, les dossiers d’évaluation et les déclencheurs de retour en arrière
- Examiner la dérive des modèles et l’activité de remplacement manuel
- Produire des éléments probants sur la supervision humaine, l’équité et les effets disproportionnés
- Rester indépendant des équipes qui développent les modèles et fournir des éléments d’évaluation sans construire de modèles, définir de seuils ou approuver des mises en production sur la base de ces éléments
- Mesurer les améliorations des flux de travail au moyen du temps de revue, du débit, de l’évolution du backlog, des taux de remplacement manuel et des taux de reprise
- Mettre en place des contrôles qualité au stade de l’évaluation pour la sélection des échantillons, les unités de revue et les comparaisons équitables entre méthodes ou sources consultées
- Définir les événements de mesure requis auprès des autres équipes et vérifier que l’espace de revue enregistre les événements du flux de travail dès la première utilisation
- Collaborer avec les scientifiques des données, les ingénieurs IA et la direction technique
- Soutenir les décisions de mise en production, les initiatives d’amélioration et les évaluations clients au moyen d’évaluations indépendantes
Exigences
- Au moins 5 ans d’expérience en validation de modèles en tant que responsabilité définie
- Expérience pratique de la constitution de données de référence et de la conception d’approches d’échantillonnage
- Solides compétences en Python et SQL
- Capacité à travailler indépendamment des équipes dont vous évaluez les modèles
- La citoyenneté américaine est requise
- Habilitation de sécurité américaine active de niveau Secret
- Volonté de satisfaire à des exigences renforcées de sécurité du personnel pour une partie du travail, comme indiqué lors de la sélection
- Expérience en gestion des risques liés aux modèles dans un secteur réglementé ou au sein du gouvernement
- Expérience des tests d’équité et d’effets disproportionnés ainsi que de la documentation de la supervision humaine
- Connaissance du cadre de gestion des risques liés à l’IA du NIST ou d’une pratique comparable
- Habilitation de sécurité active de niveau Top Secret
Avantages
- Rémunération compétitive avec prime et participation au capital
- Environnement de travail entièrement à distance et axé sur les résultats
- Couverture médicale, dentaire et optique prise en charge par l’employeur pour vous et votre famille
- Congés payés illimités avec l’accord du manager
- Horaires flexibles et autonomie dans l’organisation de votre journée
- 14 semaines de congé parental entièrement rémunéré
- Déplacements occasionnels au siège de DEFCON AI, sur les sites clients et dans les installations des partenaires selon les besoins