D
Defcon AI desarrolla software impulsado por inteligencia artificial para las operaciones de logística, transporte y cadena de suministro. Su tecnología combina modelos de software y agentes inteligentes para ayudar a las organizaciones a planificar y responder ante interrupciones causadas por desastres naturales, acontecimientos imprevistos y situaciones de conflicto. La empresa trabaja en la intersección de la inteligencia artificial, la movilidad y la logística, y colabora con socios para ofrecer herramientas basadas en datos diseñadas para mejorar la resiliencia operativa, la toma de decisiones y la eficiencia de la respuesta.
Ingeniero de Pruebas y Medición de Modelos – Trabajo Remoto en Estados Unidos
Defcon AI busca un ingeniero de pruebas y medición de modelos para validar sistemas de IA de forma independiente. El puesto abarca el desarrollo de datos de referencia, auditorías de modelos, medición de flujos de trabajo y la generación de evidencia para decisiones de lanzamiento responsables.
Estados Unidos150.000 $ – 190.000 $ / año
RemotoTiempo completoIntermedioSeniorIdioma Obligatorio: inglésIngenieroDescripción
- Construir datos de referencia etiquetados para la evaluación de modelos
- Planificar y realizar auditorías mediante muestreo
- Controlar los lanzamientos por versión del modelo, manteniendo inventarios de versiones, registros de evaluación y activadores de reversión
- Revisar la deriva de los modelos y la actividad de anulación
- Desarrollar evidencia sobre supervisión humana, equidad y efectos dispares
- Mantener la independencia respecto de los equipos que construyen modelos y proporcionar evidencia de evaluación sin construir modelos, establecer umbrales ni aprobar lanzamientos basándose en dicha evidencia
- Medir las mejoras del flujo de trabajo mediante el tiempo de revisión, el rendimiento, el movimiento de la cartera pendiente, las tasas de anulación y las tasas de retrabajo
- Establecer controles de calidad en la etapa de evaluación para la selección de muestras, las unidades de revisión y las comparaciones justas entre métodos o fuentes consultadas
- Especificar los eventos de medición requeridos a otros equipos y verificar que el espacio de trabajo de revisión registre los eventos del flujo de trabajo desde el uso inicial
- Colaborar con científicos de datos, ingenieros de IA y el liderazgo técnico
- Apoyar decisiones de lanzamiento, iniciativas de mejora y evaluaciones de clientes mediante evaluaciones independientes
Requisitos
- Al menos 5 años de experiencia con la validación de modelos como responsabilidad definida
- Experiencia práctica en la construcción de datos de referencia y el diseño de enfoques de muestreo
- Sólidos conocimientos de Python y SQL
- Capacidad para trabajar de forma independiente respecto de los equipos cuyos modelos evalúa
- Se requiere ciudadanía estadounidense
- Autorización activa de seguridad estadounidense de nivel Secret
- Disposición para cumplir requisitos elevados de seguridad del personal durante parte del trabajo, según se tratará durante la selección
- Experiencia en gestión de riesgos de modelos en sectores regulados o en el gobierno
- Experiencia en probar la equidad y los efectos dispares, y documentar la supervisión humana
- Familiaridad con el Marco de Gestión de Riesgos de IA del NIST o una práctica comparable
- Autorización activa de seguridad de nivel Top Secret
Beneficios
- Salario competitivo con bonificación y participación accionaria
- Entorno de trabajo totalmente remoto y orientado a resultados
- Cobertura médica, dental y oftalmológica pagada por el empleador para usted y su familia
- Tiempo libre remunerado ilimitado, previa aprobación del gerente
- Horario flexible con autonomía sobre la jornada laboral
- 14 semanas de permiso parental totalmente remunerado
- Viajes ocasionales a la sede de DEFCON AI, las instalaciones de clientes y las de socios, según sea necesario