Mindrift
Mindrift
Mindrift est une place de marché de talents en intelligence artificielle et une plateforme SaaS qui met en relation des contributeurs professionnels et des experts dans différents domaines avec des projets d’entraînement et d’évaluation de l’IA menés par des entreprises technologiques. En tant qu’entité de Toloka, elle collabore avec des rédacteurs, des éditeurs, des spécialistes de l’assurance qualité, des scientifiques et d’autres experts du domaine, qui contribuent à produire des données d’entraînement, à évaluer la sécurité et le raisonnement des modèles, à contrôler la qualité des contenus multimédias et à créer des scénarios réels pour améliorer les performances et la fiabilité de l’IA. Mindrift sélectionne et vérifie les contributeurs au moyen d’évaluations et d’une vérification d’identité, puis leur propose des projets rémunérés flexibles dans le domaine de l’entraînement et de l’évaluation de l’IA.

Ingénieur senior en scraping de données Python — Freelance, télétravail depuis la Pologne

Mindrift recherche un ingénieur senior Python pour concevoir des flux de scraping web fiables destinés à des projets d’IA. Le poste porte sur l’extraction, la validation et le traitement de données structurées provenant de sites web complexes et dynamiques.

Description

  • Gérer des flux complets d’extraction sur des sites web complexes
  • Fournir des jeux de données structurés complets, précis et fiables
  • Appliquer des outils et des flux de travail adaptés pour accélérer la collecte, la validation et l’exécution des tâches
  • Extraire de manière fiable des données provenant de sources web interactives et dynamiques
  • Adapter les méthodes de scraping au contenu rendu avec JavaScript et à l’évolution du comportement des sites
  • Maintenir la qualité des données grâce à la validation, aux vérifications entre sources, aux normes de formatage et à une revue systématique
  • Gérer le scraping à grande échelle grâce à un traitement efficace par lots et en parallèle
  • Suivre les échecs d’extraction et préserver la stabilité malgré les changements mineurs de structure des sites web
  • Utiliser Apify, OpenRouter et des technologies associées pour l’extraction web et le traitement des données

Exigences

  • Plus de 5 ans d’expérience pertinente en ingénierie des données, scraping web, automatisation ou développement logiciel
  • Un diplôme de licence ou de master en ingénierie, mathématiques appliquées, informatique ou dans une discipline technique connexe est un atout
  • Solides bases pratiques en scripting, automatisation et flux de travail d’extraction de données
  • Expérience avancée du scraping Python avec BeautifulSoup, Selenium ou des outils comparables, contenu JavaScript et AJAX, défilement infini et API utilisant des proxies
  • Capacité à extraire des informations de hiérarchies complexes, de pages archivées et de HTML incohérent
  • Expérience du nettoyage, de la normalisation et de la validation des données pour une livraison en CSV, JSON et Google Sheets
  • Expérience des systèmes antibot et des structures de sites web évolutives à grande échelle
  • Expérience pratique d’AWS ou d’une infrastructure cloud équivalente ainsi que de Docker dans des flux de production
  • Utilisation pratique de LangChain, OpenRouter ou de frameworks LLM similaires pour l’automatisation
  • Grande attention aux détails et forte exigence de précision des données
  • Autonomie dans le travail et capacité à analyser et résoudre les problèmes sans supervision étroite
  • Anglais de niveau intermédiaire supérieur (B2) ou plus
  • Un profil GitHub est un atout

Avantages

  • Mission freelance
  • Temps partiel d’environ 10 à 20 heures par semaine pendant les phases actives du projet
  • Travail à distance depuis la Pologne
  • Rémunération pouvant atteindre l’équivalent de 40 USD de l’heure, selon le niveau d’expérience et le rythme de contribution

Offres similaires

Jenzabar

Ingénieur senior en données, Databricks et Spark

Jenzabar

Concevez des pipelines évolutifs avec Databricks et Spark pour les logiciels éducatifs de Jenzabar et structurez des couches de données analytiques fiables. Fournissez des solutions de données robustes au service des analyses métier.

Ouvrir
Keywords Studios

Ingénieur productivité des développeurs DevOps I

Keywords Studios

Améliorez les pipelines CI/CD, l’infrastructure cloud et les outils de développement de Helpshift. Automatisez les flux de travail d’ingénierie et contribuez à Kubernetes, à l’observabilité, à la sécurité et à la fiabilité.

Ouvrir
Dev.Pro

Ingénieur logiciel full stack confirmé (Angular et .NET)

Dev.Pro
501 – 1 000 Employés
HôtellerieLogistiqueSoins de santé

Développez l’ERP interne de Dev.Pro avec Angular et .NET, en créant des portails, des services backend et des tests. Contribuez à la création d’outils évolutifs pour les équipes logicielles de Dev.Pro dans le monde entier.

Ouvrir
Petco

Analyste senior des avantages sociaux chez Petco (télétravail, États-Unis)

Petco

Supervise les programmes de santé, de prévoyance et de retraite de Petco, notamment la mise en place des prestataires, l’inscription annuelle, les audits et la conformité. Ce poste en télétravail aux États-Unis contribue également aux systèmes d’avantages sociaux, à l’amélioration des processus et aux initiatives transversales.

Ouvrir
Huntington National Bank

Analyste des solutions hypothécaires – Prévention des pertes

Huntington National Bank

Aidez les clients de Huntington confrontés à un défaut de paiement hypothécaire en préparant les documents de modification de prêt et en gérant les dossiers des emprunteurs. Coordonnez les échanges avec les emprunteurs, les agences bancaires, les prestataires et les services des comtés pour mettre en œuvre les solutions Home Savers disponibles.

Ouvrir