Mindrift
Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS
Mindrift ist ein Talent-Marktplatz und eine SaaS-Plattform für künstliche Intelligenz, die professionelle Mitwirkende und Fachexperten mit Projekten von Technologieunternehmen zur Schulung und Bewertung von KI verbindet. Als Teil von Toloka arbeitet Mindrift mit Autoren, Redakteuren, QA-Spezialisten, Wissenschaftlern und weiteren Fachexperten zusammen, die Trainingsdaten erstellen, die Sicherheit und Schlussfolgerungsfähigkeit von Modellen beurteilen, die Qualität von Medien bewerten und realitätsnahe Szenarien zur Verbesserung der Leistung und Zuverlässigkeit von KI entwickeln. Mindrift rekrutiert und prüft Mitwirkende durch Assessments und Identitätsverifizierung und bietet anschließend flexible, vergütete Projektmöglichkeiten in den Bereichen KI-Training und -Bewertung.

Senior Python-Daten-Scraping-Ingenieur auf Freelance-Basis im Remote-Einsatz

Entwickle und betreibe skalierbare Python-Scraping-Workflows für die KI-Projekte von Mindrift. Extrahiere, validiere und verarbeite strukturierte Daten aus komplexen, dynamischen Websites.

Beschreibung

  • Leite spezialisierte Scraping-Workflows für das Tendem-Projekt und Anwendungen aus der Praxis
  • Verwalte die Extraktion über komplexe Websites hinweg von Anfang bis Ende
  • Liefere vollständige, genaue und zuverlässige strukturierte Datensätze
  • Nutze verfügbare Tools und individuelle Workflows, um Datensammlung, Validierung und Aufgabenausführung zu beschleunigen
  • Scrape dynamische und interaktive Quellen und passe dich an JavaScript-gerenderte Inhalte sowie verändertes Website-Verhalten an
  • Sichere die Datenqualität durch Validierung, Abgleiche über mehrere Quellen, Formatierungsstandards und systematische Prüfung
  • Skaliere das Scraping großer Datenmengen durch effiziente Stapelverarbeitung oder parallele Verarbeitung
  • Überwache Fehler und gewährleiste Stabilität bei geringfügigen Änderungen der Website-Struktur
  • Nutze Apify, OpenRouter und verwandte Technologien zusammen mit technischem Fachwissen und maßgeschneiderten Lösungen

Anforderungen

  • Mindestens fünf Jahre einschlägige Erfahrung in Data Engineering, Web-Scraping, Automatisierung oder Softwareentwicklung sind erforderlich
  • Ein Bachelor- oder Masterabschluss in Ingenieurwesen, angewandter Mathematik, Informatik oder einem verwandten technischen Fachgebiet ist von Vorteil
  • Fundierte praktische Kenntnisse in Skripterstellung, Automatisierung und Workflows zur Datenextraktion
  • Umfangreiche Erfahrung mit Python-Scraping unter Einsatz von BeautifulSoup, Selenium oder vergleichbaren Tools, JavaScript- und AJAX-Inhalten, Infinite Scrolling sowie APIs über Proxys
  • Fähigkeit, Informationen aus komplexen Strukturen wie Hierarchien, archivierten Seiten und uneinheitlichem HTML zu extrahieren
  • Erfahrung in der Bereinigung, Normalisierung und Validierung von Daten für die strukturierte Bereitstellung als CSV, JSON oder Google Sheets
  • Nachgewiesene Erfahrung im Umgang mit Anti-Bot-Maßnahmen und sich ändernden Website-Strukturen im großen Maßstab
  • Praktische Erfahrung mit AWS oder einer vergleichbaren Cloud-Infrastruktur sowie Docker-basierter Containerisierung
  • Erfahrung mit LangChain, OpenRouter oder ähnlichen LLM-Frameworks für Automatisierungsaufgaben
  • Ausgeprägte Detailgenauigkeit und ein starker Fokus auf Datenqualität
  • Fähigkeit, selbstständig zu arbeiten und Probleme effektiv zu lösen
  • Ein GitHub-Profil ist von Vorteil
  • Gute Englischkenntnisse auf B2-Niveau oder höher sind erforderlich

Zusatzleistungen

  • Freiberufliche Tätigkeit
  • Teilzeit im Remote-Einsatz
  • Etwa 10–20 Stunden pro Woche während aktiver Projektphasen
  • Möglichkeit, über die Mindrift-Plattform an innovativen Technologieprojekten zu arbeiten

Ähnliche Stellen

Mindrift

Senior Python-Web-Scraping-Engineer – Remote in Brasilien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer sind Sie für zuverlässiges Web-Scraping, Datenvalidierung und die Bereitstellung strukturierter Datensätze für Mindrifts KI-Technologieprojekte verantwortlich. Die Rolle umfasst dynamische Websites, Anti-Bot-Systeme, Cloud-Infrastruktur und LLM-basierte Automatisierungstools.

Öffnen
Mindrift

Senior Python Data-Scraping-Ingenieur – Freiberuflich, Remote in Polen

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Mindrift sucht eine erfahrene Python-Fachkraft für den Aufbau zuverlässiger Web-Scraping-Workflows für KI-Projekte. Die Rolle konzentriert sich auf das Extrahieren, Validieren und Verarbeiten strukturierter Daten von komplexen, dynamischen Websites.

Öffnen
Mindrift

Senior Python Data-Scraping Engineer – Remote in Rumänien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer entwickelst du zuverlässige Web-Scraping- und Datenverarbeitungs-Workflows für Mindrifts Tendem-AI-Projekt. Der Schwerpunkt liegt auf der Extraktion, Validierung und Skalierung strukturierter Datensätze aus komplexen Websites.

Öffnen
Hewlett Packard Enterprise

Aruba-Kursentwickler – Remote in Mexiko

Hewlett Packard Enterprise

Entwickeln Sie kundenorientierte Kursunterlagen und technische Inhalte für Cloud-, Automatisierungs- und Managementprodukte von HPE Aruba Networking. Machen Sie komplexe Netzwerktechnologien zu praktischer Dokumentation und verständlichen Lernmaterialien.

Öffnen
Akamai Technologies

Senior Software Engineer, Sicherheitsdienste (Remote in Israel)

Akamai Technologies

Entwickeln Sie Browser-Sicherheit, Data Loss Prevention und KI-Funktionen bei Akamai. Leiten Sie cloudnative Microservices, die Millionen von Unternehmensarbeitsbereichen schützen.

Öffnen