Mindrift
Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS
Mindrift ist ein Talent-Marktplatz und eine SaaS-Plattform für künstliche Intelligenz, die professionelle Mitwirkende und Fachexperten mit Projekten von Technologieunternehmen zur Schulung und Bewertung von KI verbindet. Als Teil von Toloka arbeitet Mindrift mit Autoren, Redakteuren, QA-Spezialisten, Wissenschaftlern und weiteren Fachexperten zusammen, die Trainingsdaten erstellen, die Sicherheit und Schlussfolgerungsfähigkeit von Modellen beurteilen, die Qualität von Medien bewerten und realitätsnahe Szenarien zur Verbesserung der Leistung und Zuverlässigkeit von KI entwickeln. Mindrift rekrutiert und prüft Mitwirkende durch Assessments und Identitätsverifizierung und bietet anschließend flexible, vergütete Projektmöglichkeiten in den Bereichen KI-Training und -Bewertung.

Senior Python Data-Scraping-Ingenieur (Freiberuflich, remote in Saudi-Arabien)

Senior-Python-Ingenieur zur Entwicklung skalierbarer Scraping-Workflows für Mindrifts Tendem-AI-Projekt. Der Schwerpunkt liegt auf der Extraktion, Validierung und Strukturierung komplexer Webdaten mit Python und Automatisierungstools.

Beschreibung

  • Leite spezialisierte Data-Scraping-Workflows für Mindrifts Tendem-Projekt und dessen Anwendungen in der Praxis
  • Verwalte durchgängige Extraktionspipelines für komplexe Websites
  • Erstelle vollständige, genaue, zuverlässige und gut strukturierte Datensätze
  • Setze Apify, OpenRouter und individuelle Workflows ein, um Datensammlung, Validierung und Aufgabenausführung zu optimieren
  • Erfasse Daten aus dynamischen, interaktiven Quellen und passe dich an JavaScript-gerenderte Inhalte sowie verändertes Website-Verhalten an
  • Sichere die Datenqualität durch Validierungsprüfungen, Vergleiche zwischen Quellen, Formatierungskontrollen und systematische Verifizierung
  • Skaliere Scraping großer Datenmengen durch effiziente Stapelverarbeitung und parallele Verarbeitung
  • Untersuche Fehler und erhalte die Stabilität der Pipelines trotz kleiner Änderungen an der Website-Struktur
  • Löse komplexe Herausforderungen in den Bereichen Skripting, Automatisierung, Extraktion, Datenstrukturierung und Validierung selbstständig

Anforderungen

  • Mindestens 5 Jahre einschlägige Erfahrung in Data Engineering, Web Scraping, Automatisierung oder Softwareentwicklung
  • Englischkenntnisse auf oberem Mittelstufenniveau (B2) oder höher
  • Fortgeschrittene Erfahrung mit Python-Scraping, BeautifulSoup, Selenium oder vergleichbaren Tools, dynamischen JavaScript-/AJAX-Inhalten, unendlichem Scrollen und proxybasierten APIs
  • Fähigkeit, Informationen aus komplexen Hierarchien, archivierten Seiten und uneinheitlichem HTML zu extrahieren
  • Fundierte Kenntnisse in Datenbereinigung, Normalisierung und Validierung
  • Praktische Erfahrung im Umgang mit Anti-Bot-Schutzmaßnahmen und sich ändernden Website-Strukturen in großem Umfang
  • Erfahrung mit AWS oder vergleichbarer Cloud-Infrastruktur
  • Erfahrung beim Verpacken von Anwendungen mit Docker
  • Praktische Erfahrung mit LangChain, OpenRouter oder ähnlichen LLM-Frameworks für die Automatisierung
  • Ausgeprägte Detailgenauigkeit und starker Fokus auf Datenrichtigkeit
  • Eigenmotivierte Arbeitsweise und Sicherheit bei der selbstständigen Fehlerbehebung
  • Ein Bachelor- oder Masterabschluss in Ingenieurwissenschaften, Angewandter Mathematik, Informatik oder einer verwandten technischen Fachrichtung ist von Vorteil
  • Ein Link zu einem GitHub-Profil ist von Vorteil

Zusatzleistungen

  • Flexible freiberufliche Teilzeitbeschäftigung
  • Voraussichtlicher Arbeitsaufwand von 10–20 Stunden pro Woche während aktiver Projektphasen
  • Vergütung von bis zu umgerechnet 37 US-Dollar pro Stunde, abhängig von Erfahrungsniveau und Beitragstempo
  • Möglichkeit, an innovativen Projekten zur Entwicklung von KI und Technologie mitzuwirken
  • Vollständig remote

Ähnliche Stellen

Mindrift

Senior Python-Web-Scraping-Engineer – Remote in Brasilien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer sind Sie für zuverlässiges Web-Scraping, Datenvalidierung und die Bereitstellung strukturierter Datensätze für Mindrifts KI-Technologieprojekte verantwortlich. Die Rolle umfasst dynamische Websites, Anti-Bot-Systeme, Cloud-Infrastruktur und LLM-basierte Automatisierungstools.

Öffnen
Mindrift

Senior Python Data-Scraping-Ingenieur – Freiberuflich, Remote in Polen

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Mindrift sucht eine erfahrene Python-Fachkraft für den Aufbau zuverlässiger Web-Scraping-Workflows für KI-Projekte. Die Rolle konzentriert sich auf das Extrahieren, Validieren und Verarbeiten strukturierter Daten von komplexen, dynamischen Websites.

Öffnen
Mindrift

Senior Python Data-Scraping Engineer – Remote in Rumänien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer entwickelst du zuverlässige Web-Scraping- und Datenverarbeitungs-Workflows für Mindrifts Tendem-AI-Projekt. Der Schwerpunkt liegt auf der Extraktion, Validierung und Skalierung strukturierter Datensätze aus komplexen Websites.

Öffnen
Hewlett Packard Enterprise

Aruba-Kursentwickler – Remote in Mexiko

Hewlett Packard Enterprise

Entwickeln Sie kundenorientierte Kursunterlagen und technische Inhalte für Cloud-, Automatisierungs- und Managementprodukte von HPE Aruba Networking. Machen Sie komplexe Netzwerktechnologien zu praktischer Dokumentation und verständlichen Lernmaterialien.

Öffnen
Akamai Technologies

Senior Software Engineer, Sicherheitsdienste (Remote in Israel)

Akamai Technologies

Entwickeln Sie Browser-Sicherheit, Data Loss Prevention und KI-Funktionen bei Akamai. Leiten Sie cloudnative Microservices, die Millionen von Unternehmensarbeitsbereichen schützen.

Öffnen