Mindrift
Mindrift
Mindrift est une place de marché de talents en intelligence artificielle et une plateforme SaaS qui met en relation des contributeurs professionnels et des experts dans différents domaines avec des projets d’entraînement et d’évaluation de l’IA menés par des entreprises technologiques. En tant qu’entité de Toloka, elle collabore avec des rédacteurs, des éditeurs, des spécialistes de l’assurance qualité, des scientifiques et d’autres experts du domaine, qui contribuent à produire des données d’entraînement, à évaluer la sécurité et le raisonnement des modèles, à contrôler la qualité des contenus multimédias et à créer des scénarios réels pour améliorer les performances et la fiabilité de l’IA. Mindrift sélectionne et vérifie les contributeurs au moyen d’évaluations et d’une vérification d’identité, puis leur propose des projets rémunérés flexibles dans le domaine de l’entraînement et de l’évaluation de l’IA.

Ingénieur senior en scraping web Python - Télétravail au Brésil

Ingénieur senior Python chargé de réaliser un scraping web fiable, de valider les données et de livrer des jeux de données structurés pour les projets de technologie d’IA de Mindrift. Le poste couvre les sites web dynamiques, les systèmes antibot, l’infrastructure cloud et les outils d’automatisation fondés sur les LLM.

Description

  • Piloter des flux complets d’extraction de données sur des sites web complexes
  • Livrer des jeux de données structurés offrant une couverture complète, une grande précision et des délais fiables
  • Utiliser les outils disponibles et des flux de travail adaptés pour accélérer la collecte des données, leur validation et l’exécution des tâches
  • Extraire des informations de sources dynamiques et interactives, notamment de pages rendues avec JavaScript
  • Adapter les méthodes de scraping à mesure que le comportement des sites web évolue
  • Maintenir la qualité des données grâce à la validation, aux vérifications entre sources, aux exigences de formatage et à une vérification systématique
  • Mettre à l’échelle le scraping de grands volumes grâce à un traitement efficace par lots ou en parallèle
  • Suivre les échecs et préserver la stabilité lors de changements mineurs dans la structure des sites web
  • Intégrer des outils tels qu’Apify, OpenRouter et des technologies connexes aux flux de travail de scraping et de traitement

Exigences

  • Au moins cinq ans d’expérience pertinente en ingénierie des données, scraping web, automatisation ou développement logiciel
  • Un diplôme de licence ou de master en ingénierie, mathématiques appliquées, informatique ou dans une discipline technique connexe serait un atout
  • Solides bases techniques et expérience pratique des scripts, de l’automatisation et des flux de travail d’extraction de données
  • Expérience approfondie du scraping Python avec BeautifulSoup, Selenium ou des outils comparables, du contenu dynamique et des API utilisant des proxys
  • Capacité à extraire des informations de structures complexes, notamment des hiérarchies, des pages archivées et du HTML incohérent
  • Solide expérience du nettoyage, de la normalisation et de la validation des données
  • Expérience avérée de la gestion des systèmes antibot et des structures de sites web dynamiques à grande échelle
  • Expérience avec AWS ou une infrastructure cloud comparable et avec la conteneurisation Docker
  • Expérience pratique de l’application de LangChain, OpenRouter ou de frameworks LLM similaires à des tâches d’automatisation
  • Grande attention aux détails et souci de la précision des données
  • Autonomie et capacité à résoudre les problèmes de manière indépendante
  • Anglais de niveau intermédiaire supérieur (B2) ou plus
  • Un lien vers un profil GitHub serait un atout

Avantages

  • Mission freelance
  • Travail à distance à temps partiel
  • Environ 10 à 20 heures par semaine pendant les phases actives du projet
  • Rémunération pouvant atteindre l’équivalent de 25 $US de l’heure, selon le niveau d’expérience et le rythme de contribution
  • Possibilité de contribuer à des projets innovants dans les domaines de la technologie et du développement de l’IA

Offres similaires

Crash Champions

Directeur général, réparation de carrosserie – Pompano Beach

Crash Champions

Pilote les opérations quotidiennes de réparation de carrosserie au centre Crash Champions de Pompano Beach, en supervisant la production, les effectifs, la qualité des réparations, les estimations et les objectifs de performance. Accompagne et fait progresser l’équipe tout en gérant les travaux, de la réception du véhicule à sa livraison.

Ouvrir
EY

Directeur des politiques législatives

EY

Piloter la stratégie d’EY auprès du Congrès et des organismes de réglementation sur les sujets qui concernent le cabinet et la profession comptable. Le poste comprend des activités de lobbying, le conseil aux responsables publics et la représentation d’EY à Washington.

Ouvrir
Harmoney

Ingénieur d’intégration – Java, REST et OpenAPI

Harmoney
51 – 200 Employés
B2CFinanceFintech

Développez et accompagnez des intégrations en Java pour la plateforme SaaS de conformité de Harmoney, depuis son bureau de Gand. Prenez en charge le catalogue d’intégrations et contribuez à la création d’une future marketplace.

Ouvrir
Thermo Fisher Scientific

Ingénieur de service itinérant, microscopie électronique (Irlande)

Thermo Fisher Scientific

Assurez la maintenance et la réparation des microscopes électroniques de Thermo Fisher Scientific et accompagnez les clients dans toute l’Irlande. Le poste couvre les installations, le dépannage, la formation des clients et le service technique.

Ouvrir
Carrier Commercial Refrigeration

Coordinateur des interventions et du support technique — Réfrigération commerciale Carrier (Serbie, sur site)

Carrier Commercial Refrigeration

Coordonne les interventions sur les équipements et le support technique pour les clients de Carrier Commercial Refrigeration en Serbie. Le poste associe travail sur site sur les équipements, demandes des clients, documentation des interventions, dépannage et escalade des problèmes.

Ouvrir