Gramian Consulting es una firma de consultoría con enfoque remoto que se especializa en talento de ingeniería, datos e inteligencia artificial. Ayuda a las organizaciones a ampliar su capacidad técnica mediante la ampliación de equipos con talento, la selección de personal, los equipos dedicados y la gestión de contratistas, además de ofrecer servicios como entrenamiento y ajuste fino de modelos de lenguaje de gran escala, agentes y asistentes de IA, MLOps e infraestructura de IA. La firma también apoya el desarrollo profesional individual mediante programas de mentoría y formación que abarcan la preparación profesional, la preparación para entrevistas y la orientación sobre mercados internacionales. Su trabajo combina experiencia práctica en ingeniería y selección de personal para ayudar a sus clientes a crear equipos técnicos y aplicar la IA a sus necesidades empresariales.
Contratista de evaluación de IA con química científica y Python – remoto en Bangladesh
Puesto por contrato para crear y validar problemas de química basados en Python para conjuntos de datos de entrenamiento de IA avanzada. Desarrolla soluciones deterministas, pruebas y tareas de evaluación para Gramian Consulting.
Descripción
- Diseñar tareas de programación científica con un problema central de química y al menos tres subproblemas conectados lógicamente que aumenten progresivamente en complejidad.
- Crear soluciones de referencia verificadas en Python con una cobertura integral de pruebas unitarias.
- Desarrollar pruebas discriminativas que distingan los resultados correctos generados por IA de los incorrectos.
- Realizar controles de calidad en la Plataforma Central de Tareas, incluida la validación estructural de Nivel 1 y las rúbricas de calidad de Nivel 2.
- Revisar las especificaciones, implementaciones y pruebas de las tareas en respuesta a los comentarios del control de calidad.
- Ajustar las tareas para cumplir los criterios Pass@K en los evaluadores GPT, Gemini y Nemotron.
- Mantener la precisión científica, el determinismo, la correcta formulación de los problemas y los requisitos de calidad del proyecto.
- Entregar primeras versiones sólidas, reduciendo el retrabajo y orientándose constantemente a la aprobación de Nivel 1.
- Asistir a reuniones de revisión, sesiones de comentarios y reuniones de seguimiento del proyecto durante las horas de solapamiento requeridas.
Requisitos
- Máster o doctorado en Química.
- Sólidos conocimientos de programación en Python y experiencia en computación científica.
- Experiencia con bibliotecas científicas de Python como NumPy, SciPy, SymPy u otras herramientas específicas del área comparables.
- Capacidad para definir problemas científicos rigurosos con restricciones explícitas y resultados esperados.
- Experiencia en la implementación de soluciones científicas con pruebas unitarias y resultados deterministas.
- Experiencia previa en anotación de datos para IA, investigación científica o redacción científica.
- Familiaridad con marcos de evaluación de modelos de lenguaje, benchmarks de programación o evaluación de código generado por IA.
- Investigación publicada o experiencia en proyectos académicos de química u otro campo STEM.