Mindrift
Mindrift
Mindrift est une place de marché de talents en intelligence artificielle et une plateforme SaaS qui met en relation des contributeurs professionnels et des experts dans différents domaines avec des projets d’entraînement et d’évaluation de l’IA menés par des entreprises technologiques. En tant qu’entité de Toloka, elle collabore avec des rédacteurs, des éditeurs, des spécialistes de l’assurance qualité, des scientifiques et d’autres experts du domaine, qui contribuent à produire des données d’entraînement, à évaluer la sécurité et le raisonnement des modèles, à contrôler la qualité des contenus multimédias et à créer des scénarios réels pour améliorer les performances et la fiabilité de l’IA. Mindrift sélectionne et vérifie les contributeurs au moyen d’évaluations et d’une vérification d’identité, puis leur propose des projets rémunérés flexibles dans le domaine de l’entraînement et de l’évaluation de l’IA.

Ingénieur senior Python spécialisé en web scraping — télétravail depuis l’Arabie saoudite

Ingénieur senior Python développant des flux fiables de web scraping et de traitement des données pour le projet Tendem AI de Mindrift. Le poste se concentre sur l’extraction, la validation et la mise à l’échelle de jeux de données structurés provenant de sites web complexes.

Description

  • Piloter des flux complets d’extraction de données sur des sites web complexes
  • Maintenir une couverture exhaustive, des résultats précis et une livraison fiable de jeux de données structurés
  • Utiliser les outils disponibles et des flux de travail adaptés pour accélérer la collecte de données, la validation et l’exécution des tâches
  • Récupérer les données de manière cohérente à partir de sources web dynamiques et interactives
  • Adapter les méthodes d’extraction au contenu rendu par JavaScript et à l’évolution du comportement des sites web
  • Garantir la qualité des données grâce à des contrôles de validation, des comparaisons entre sources, des règles de formatage et une vérification systématique
  • Mettre à l’échelle le scraping de grands volumes grâce à un traitement efficace par lots ou en parallèle
  • Suivre les échecs et préserver la stabilité des flux de travail malgré les changements mineurs de structure des sites
  • Utiliser Apify, OpenRouter et des technologies connexes dans les flux d’extraction web et de traitement des données

Exigences

  • Plus de 5 ans d’expérience pertinente en ingénierie des données, web scraping, automatisation ou développement logiciel
  • Un diplôme de licence ou de master en ingénierie, mathématiques appliquées, informatique ou dans une discipline technique connexe est souhaité
  • Expérience avancée du web scraping en Python, notamment avec BeautifulSoup, Selenium ou des outils comparables, le contenu dynamique et les API basées sur des proxys
  • Capacité à extraire des informations de structures complexes telles que des hiérarchies, des pages archivées et du HTML incohérent
  • Expérience du nettoyage, de la normalisation et de la validation des données pour une livraison en CSV, JSON ou Google Sheets
  • Expérience pratique de la gestion des systèmes antibot et de l’évolution des structures de sites à grande échelle
  • Expérience avec AWS ou une infrastructure cloud comparable
  • Expérience du packaging d’applications avec Docker
  • Utilisation pratique de LangChain, OpenRouter ou de frameworks LLM similaires pour des tâches d’automatisation
  • Grande attention aux détails et souci constant de l’exactitude des données
  • Capacité à travailler de manière autonome, à gérer ses tâches et à résoudre les problèmes
  • Anglais de niveau upper-intermediate (B2) ou supérieur
  • Un profil GitHub est un atout

Avantages

  • Mission freelance à temps partiel
  • Environ 10 à 20 heures par semaine pendant les phases actives du projet
  • Jusqu’à l’équivalent de 37 $ par heure, selon le niveau de contribution et le rythme de travail
  • Charge de travail flexible basée sur des projets, avec une rémunération variable selon le périmètre, la complexité et l’expertise requise
  • Possibilité de contribuer à des projets technologiques et de développement de l’IA

Offres similaires

SHOP APOTHEKE EUROPE

Ingénieur DevSecOps senior

SHOP APOTHEKE EUROPE

Sécurisez les pipelines CI/CD, les plateformes Kubernetes et les applications cloud natives, tout en aidant les équipes d’ingénierie à concevoir des solutions sûres pour la data et l’IA. Définissez les normes et les contrôles de sécurité des équipes de développement de SHOP APOTHEKE EUROPE.

Ouvrir
Bristol Myers Squibb

Conseiller juridique général adjoint, transactions de développement commercial

Bristol Myers Squibb

Pilotez la stratégie juridique, les négociations et la gestion des risques liés aux opérations de développement commercial biopharmaceutique de Bristol Myers Squibb. Encadrez des juristes confirmés et conseillez sur des opérations complexes de licence, de fusion-acquisition, de collaboration et d’investissement.

Ouvrir
American Express

Responsable senior du développement commercial, marché intermédiaire — American Express

American Express

Chez American Express, pilotez l’acquisition de clients du marché intermédiaire et conseillez les dirigeants sur les solutions financières. Gérez des portefeuilles stratégiques, des négociations et des opportunités de croissance sur mesure dans l’État de Washington et l’Oregon.

Ouvrir
SAIC

Directeur du développement commercial de SAIC, défense et espace civil

SAIC

Pilotez la croissance de SAIC dans les secteurs de la défense et de l’espace civil aux États-Unis, notamment la conquête de marchés auprès de l’US Space Force, les relations clients et l’intégration de missions. SAIC recherche un responsable expérimenté du développement commercial pour façonner des opportunités stratégiques dans le commandement et le contrôle spatial.

Ouvrir
Emerson

Responsable senior du développement commercial, logiciels industriels et solutions PLC

Emerson

Pilotez le développement commercial en Amérique du Nord pour les solutions logicielles industrielles, de visualisation, edge et PLC d’Emerson. Développez les relations avec les clients et partenaires, étoffez le portefeuille d’opportunités et guidez l’adoption sur le marché.

Ouvrir
American Express

Responsable des ventes terrain et du développement commercial chez American Express (à distance, États-Unis)

American Express

Pilotez les ventes terrain de solutions financières American Express auprès des entreprises américaines de taille moyenne. Nouez des relations avec les dirigeants, concluez des accords complexes et développez un territoire commercial.

Ouvrir
Park Place Technologies

Ingénieur de maintenance sur site, matériel de centres de données – Reno

Park Place Technologies
1 001 – 5 000 Employés
B2BEntrepriseMatériel informatique

Diagnostique et répare le matériel, le stockage et les systèmes réseau des centres de données chez les clients de Park Place Technologies. Se déplace dans un secteur attribué et assure la maintenance selon les SLA des clients.

Ouvrir
Palo Alto Networks

Responsable du développement commercial, Unit 42 LATAM

Palo Alto Networks

Développez l’activité de conseil en cybersécurité d’Unit 42, Palo Alto Networks, au Brésil et en Amérique latine. Créez un portefeuille de clients entreprises et des relations avec des dirigeants pour les services de réponse aux incidents et de gestion des cyberrisques.

Ouvrir