Mindrift
Mindrift
Mindrift est une place de marché de talents en intelligence artificielle et une plateforme SaaS qui met en relation des contributeurs professionnels et des experts dans différents domaines avec des projets d’entraînement et d’évaluation de l’IA menés par des entreprises technologiques. En tant qu’entité de Toloka, elle collabore avec des rédacteurs, des éditeurs, des spécialistes de l’assurance qualité, des scientifiques et d’autres experts du domaine, qui contribuent à produire des données d’entraînement, à évaluer la sécurité et le raisonnement des modèles, à contrôler la qualité des contenus multimédias et à créer des scénarios réels pour améliorer les performances et la fiabilité de l’IA. Mindrift sélectionne et vérifie les contributeurs au moyen d’évaluations et d’une vérification d’identité, puis leur propose des projets rémunérés flexibles dans le domaine de l’entraînement et de l’évaluation de l’IA.

Ingénieur senior en scraping de données Python — Freelance, télétravail depuis la Pologne

Mindrift recherche un ingénieur senior Python pour concevoir des flux de scraping web fiables destinés à des projets d’IA. Le poste porte sur l’extraction, la validation et le traitement de données structurées provenant de sites web complexes et dynamiques.

Description

  • Gérer des flux complets d’extraction sur des sites web complexes
  • Fournir des jeux de données structurés complets, précis et fiables
  • Appliquer des outils et des flux de travail adaptés pour accélérer la collecte, la validation et l’exécution des tâches
  • Extraire de manière fiable des données provenant de sources web interactives et dynamiques
  • Adapter les méthodes de scraping au contenu rendu avec JavaScript et à l’évolution du comportement des sites
  • Maintenir la qualité des données grâce à la validation, aux vérifications entre sources, aux normes de formatage et à une revue systématique
  • Gérer le scraping à grande échelle grâce à un traitement efficace par lots et en parallèle
  • Suivre les échecs d’extraction et préserver la stabilité malgré les changements mineurs de structure des sites web
  • Utiliser Apify, OpenRouter et des technologies associées pour l’extraction web et le traitement des données

Exigences

  • Plus de 5 ans d’expérience pertinente en ingénierie des données, scraping web, automatisation ou développement logiciel
  • Un diplôme de licence ou de master en ingénierie, mathématiques appliquées, informatique ou dans une discipline technique connexe est un atout
  • Solides bases pratiques en scripting, automatisation et flux de travail d’extraction de données
  • Expérience avancée du scraping Python avec BeautifulSoup, Selenium ou des outils comparables, contenu JavaScript et AJAX, défilement infini et API utilisant des proxies
  • Capacité à extraire des informations de hiérarchies complexes, de pages archivées et de HTML incohérent
  • Expérience du nettoyage, de la normalisation et de la validation des données pour une livraison en CSV, JSON et Google Sheets
  • Expérience des systèmes antibot et des structures de sites web évolutives à grande échelle
  • Expérience pratique d’AWS ou d’une infrastructure cloud équivalente ainsi que de Docker dans des flux de production
  • Utilisation pratique de LangChain, OpenRouter ou de frameworks LLM similaires pour l’automatisation
  • Grande attention aux détails et forte exigence de précision des données
  • Autonomie dans le travail et capacité à analyser et résoudre les problèmes sans supervision étroite
  • Anglais de niveau intermédiaire supérieur (B2) ou plus
  • Un profil GitHub est un atout

Avantages

  • Mission freelance
  • Temps partiel d’environ 10 à 20 heures par semaine pendant les phases actives du projet
  • Travail à distance depuis la Pologne
  • Rémunération pouvant atteindre l’équivalent de 40 USD de l’heure, selon le niveau d’expérience et le rythme de contribution

Offres similaires

Meltwater

Analyste des intégrations d’entreprise chez Meltwater — Hyderabad, hybride

Meltwater
1 001 – 5 000 Employés
Sponsor de visa H1BConseilMarketingMédias

Développez et assurez le support d’intégrations fiables entre Salesforce, Snowflake, AWS et d’autres systèmes d’entreprise. Aidez Meltwater à proposer à ses clients des outils fondés sur les données.

Ouvrir
Aurora Energy Research

Chargé de recherche, marchés de l’électricité et de l’énergie au Japon

Aurora Energy Research

Chargé de recherche chez Aurora Energy Research, spécialisé dans les marchés de l’électricité et de l’énergie au Japon. Vous élaborerez des analyses quantitatives et des recommandations pour les clients sur la politique énergétique, les énergies renouvelables et la transition énergétique.

Ouvrir
Roche

Analyste de données, accès des patients

Roche

Analyse les données relatives à l’accès des patients et au secteur pharmaceutique chez Roche, et contribue au volet Expérience Patient en produisant des rapports et des analyses. Crée des tableaux de bord et utilise Excel, SQL et Python pour éclairer les stratégies d’accès aux soins.

Ouvrir
Aurora Energy Research

Analyste senior en recherche, marché de l’énergie en Chine — Singapour

Aurora Energy Research

Poste d’analyse de recherche consacré aux marchés chinois de l’énergie chez Aurora Energy Research, cabinet de conseil en modélisation des marchés de l’électricité. La personne recrutée élaborera des analyses quantitatives, contribuera au développement de produits et partagera des recommandations avec les clients.

Ouvrir