Mindrift
Mindrift
Mindrift est une place de marché de talents en intelligence artificielle et une plateforme SaaS qui met en relation des contributeurs professionnels et des experts dans différents domaines avec des projets d’entraînement et d’évaluation de l’IA menés par des entreprises technologiques. En tant qu’entité de Toloka, elle collabore avec des rédacteurs, des éditeurs, des spécialistes de l’assurance qualité, des scientifiques et d’autres experts du domaine, qui contribuent à produire des données d’entraînement, à évaluer la sécurité et le raisonnement des modèles, à contrôler la qualité des contenus multimédias et à créer des scénarios réels pour améliorer les performances et la fiabilité de l’IA. Mindrift sélectionne et vérifie les contributeurs au moyen d’évaluations et d’une vérification d’identité, puis leur propose des projets rémunérés flexibles dans le domaine de l’entraînement et de l’évaluation de l’IA.

Ingénieur senior en scraping web avec Python (Freelance, à distance)

Développez et faites évoluer des flux fiables de scraping web avec Python pour les projets d’IA de Mindrift. Extrayez, validez et fournissez des données structurées précises issues de sites web complexes et dynamiques.

Description

  • Réaliser des missions de scraping web et de traitement des données avec une grande précision technique
  • Gérer des flux d’extraction complets sur des sites web complexes, en fournissant des ensembles de données structurées exhaustifs, précis et fiables
  • Utiliser les outils disponibles et des flux de travail adaptés pour accélérer la collecte, la validation et l’exécution des tâches conformément aux exigences définies
  • Adapter les méthodes d’extraction aux pages rendues en JavaScript, aux sources interactives et à l’évolution du comportement des sites web
  • Appliquer des contrôles de qualité des données, notamment la validation, les vérifications entre sources, les normes de formatage et la vérification systématique avant livraison
  • Faire évoluer le scraping de gros volumes grâce à un traitement par lots efficace ou au traitement parallèle
  • Suivre les échecs d’extraction et préserver la stabilité opérationnelle malgré les changements mineurs de structure des sites
  • Utiliser Apify, OpenRouter et d’autres technologies pertinentes pour soutenir les opérations de scraping

Exigences

  • Justifier d’au moins 5 ans d’expérience pertinente en ingénierie des données, scraping web, automatisation ou développement logiciel
  • Démontrer une solide maîtrise du scraping Python avec BeautifulSoup, Selenium ou des outils comparables, du contenu dynamique et des API utilisant des proxys
  • Extraire des informations à partir de structures complexes, notamment des hiérarchies, des pages archivées et du HTML irrégulier
  • Nettoyer, normaliser et valider les données pour une livraison au format CSV, JSON ou Google Sheets
  • Gérer les protections antibot et l’évolution des structures des sites à grande échelle
  • Travailler avec AWS ou une infrastructure cloud comparable ainsi qu’avec la conteneurisation basée sur Docker
  • Appliquer des frameworks LLM tels que LangChain, OpenRouter ou des outils similaires aux flux d’automatisation
  • Faire preuve d’une attention exceptionnelle aux détails et à l’exactitude des données
  • Travailler de manière autonome avec une approche autodirigée du dépannage
  • Communiquer en anglais à un niveau intermédiaire supérieur (B2) ou plus
  • Un diplôme de licence ou de master en ingénierie, mathématiques appliquées, informatique ou dans une discipline technique connexe constitue un plus
  • Un lien vers un profil GitHub constitue un plus

Avantages

  • Mission freelance
  • Planning à distance à temps partiel
  • Environ 10 à 20 heures par semaine pendant les phases actives des projets
  • Possibilité de contribuer à des projets technologiques innovants via la plateforme Mindrift

Offres similaires

4M Analytics

Ingénieur senior en algorithmes de vision par ordinateur

4M Analytics

Développez des systèmes de vision par ordinateur et d’apprentissage automatique pour la plateforme de cartographie des réseaux souterrains de 4M Analytics. Pilotez les algorithmes de la recherche à la production avec les équipes d’ingénierie des données et produit.

Ouvrir
Joom

Responsable de la réussite client grands comptes, Brésil (à distance)

Joom

Pilotez les renouvellements, la fidélisation et le développement des comptes clients grands comptes de JoomPulse. Transformez les analyses de Mercado Livre et Shopee en recommandations concrètes pour les vendeurs sur les marketplaces.

Ouvrir
Terumo Medical Corporation

Responsable régional des ventes, Terumo Interventional Systems

Terumo Medical Corporation

Pilotez les ventes de dispositifs médicaux dans une région du centre-nord du New Jersey, en encadrant les équipes de terrain et les relations avec les hôpitaux. Développez le chiffre d’affaires régional, les performances commerciales et la promotion conforme des produits Terumo Interventional Systems.

Ouvrir
Claroty

Ingénieur en automatisation QA

Claroty

Développez l’automatisation des API et de l’interface utilisateur ainsi que des contrôles qualité CI/CD pour la plateforme de sécurité cyberphysique de Claroty. Contribuez à protéger les infrastructures critiques grâce à des tests fiables.

Ouvrir
The Clorox Company

Responsable des finances industrielles

The Clorox Company

Pilote les activités financières industrielles de Clorox, notamment la consolidation des coûts, les prévisions et la clôture comptable mensuelle. Collabore avec les sites de production, les Achats et la Planification des approvisionnements au Mexique.

Ouvrir