Gramian Consulting est un cabinet de conseil privilégiant le travail à distance et spécialisé dans les talents en ingénierie, en données et en intelligence artificielle. Il aide les organisations à renforcer leurs capacités techniques grâce à la mise à disposition de talents, au recrutement, aux équipes dédiées et à la gestion de contractuels, tout en proposant des services tels que l’entraînement et l’ajustement fin de grands modèles de langage, les agents et assistants d’IA, le MLOps et l’infrastructure d’IA. Le cabinet soutient également le développement professionnel individuel au moyen de programmes de mentorat et de formation portant sur la préparation à la carrière, la préparation aux entretiens et l’orientation vers les marchés internationaux. Son travail associe une expérience concrète en ingénierie et en recrutement pour aider ses clients à constituer des équipes techniques et à appliquer l’IA à leurs besoins professionnels.
Prestataire en évaluation de l’IA appliquée à la chimie scientifique et à Python – télétravail depuis le Bangladesh
Mission contractuelle visant à créer et valider des problèmes de chimie en Python pour des jeux de données d’entraînement d’IA de pointe. Développer des solutions déterministes, des tests et des tâches d’évaluation pour Gramian Consulting.
Description
- Concevoir des tâches de programmation scientifique comprenant un problème central de chimie et au moins trois sous-problèmes logiquement liés, dont la complexité augmente progressivement.
- Construire des solutions de référence vérifiées en Python avec une couverture complète par des tests unitaires.
- Développer des tests discriminants permettant de distinguer les résultats corrects générés par l’IA des résultats incorrects.
- Effectuer des contrôles qualité dans la Plateforme centrale des tâches, couvrant la validation structurelle de niveau 1 et les grilles de qualité de niveau 2.
- Réviser les spécifications, les implémentations et les tests des tâches en réponse aux retours du contrôle qualité.
- Ajuster les tâches afin de satisfaire aux critères Pass@K auprès des évaluateurs GPT, Gemini et Nemotron.
- Garantir l’exactitude scientifique, le déterminisme, la bonne formulation des problèmes et les exigences de qualité du projet.
- Fournir des premières soumissions solides, réduire les reprises et viser systématiquement l’approbation de niveau 1.
- Participer aux réunions de revue, aux sessions de feedback et aux réunions de suivi du projet pendant les heures de chevauchement requises.
Exigences
- Master ou doctorat en chimie.
- Solides compétences en programmation Python et expérience en calcul scientifique.
- Expérience des bibliothèques scientifiques Python telles que NumPy, SciPy, SymPy ou des outils comparables propres au domaine.
- Capacité à définir des problèmes scientifiques rigoureux avec des contraintes explicites et des résultats attendus.
- Expérience de la mise en œuvre de solutions scientifiques avec des tests unitaires et des résultats déterministes.
- Expérience préalable en annotation de données pour l’IA, en recherche scientifique ou en rédaction scientifique.
- Connaissance des cadres d’évaluation des LLM, des benchmarks de programmation ou de l’évaluation de code généré par l’IA.
- Travaux de recherche publiés ou expérience de projets universitaires en chimie ou dans un autre domaine STEM.