Mindrift
Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS
Mindrift ist ein Talent-Marktplatz und eine SaaS-Plattform für künstliche Intelligenz, die professionelle Mitwirkende und Fachexperten mit Projekten von Technologieunternehmen zur Schulung und Bewertung von KI verbindet. Als Teil von Toloka arbeitet Mindrift mit Autoren, Redakteuren, QA-Spezialisten, Wissenschaftlern und weiteren Fachexperten zusammen, die Trainingsdaten erstellen, die Sicherheit und Schlussfolgerungsfähigkeit von Modellen beurteilen, die Qualität von Medien bewerten und realitätsnahe Szenarien zur Verbesserung der Leistung und Zuverlässigkeit von KI entwickeln. Mindrift rekrutiert und prüft Mitwirkende durch Assessments und Identitätsverifizierung und bietet anschließend flexible, vergütete Projektmöglichkeiten in den Bereichen KI-Training und -Bewertung.

Senior Python-Web-Scraping-Engineer (freiberuflich, remote)

Entwickle und skaliere zuverlässige Python-Web-Scraping-Workflows für die KI-Projekte von Mindrift. Extrahiere, validiere und liefere präzise strukturierte Daten aus komplexen, dynamischen Websites.

Beschreibung

  • Führe technisch präzise Web-Scraping- und Datenverarbeitungsaufgaben durch
  • Verwalte vollständige Extraktions-Workflows über komplexe Websites hinweg und liefere umfassende, präzise und zuverlässige strukturierte Datensätze
  • Nutze verfügbare Tools und maßgeschneiderte Workflows, um Sammlung, Validierung und Aufgabenbearbeitung gemäß den festgelegten Anforderungen zu beschleunigen
  • Passe Extraktionsmethoden an JavaScript-gerenderte Seiten, interaktive Quellen und sich veränderndes Website-Verhalten an
  • Wende Maßnahmen zur Datenqualität an, darunter Validierung, Abgleich über mehrere Quellen, Formatierungsstandards und systematische Überprüfung vor der Auslieferung
  • Skaliere das Scraping großer Datenmengen durch effiziente Stapelverarbeitung oder parallele Verarbeitung
  • Verfolge Extraktionsfehler und stelle die operative Stabilität bei kleineren Änderungen der Website-Struktur sicher
  • Nutze Apify, OpenRouter und andere relevante Technologien zur Unterstützung der Scraping-Prozesse

Anforderungen

  • Mindestens 5 Jahre einschlägige Erfahrung in Data Engineering, Web Scraping, Automatisierung oder Softwareentwicklung
  • Nachweislich fundierte Python-Scraping-Kenntnisse mit BeautifulSoup, Selenium oder vergleichbaren Tools, dynamischen Inhalten und proxybasierten APIs
  • Extrahiere Informationen aus komplexen Strukturen, einschließlich Hierarchien, archivierten Seiten und unregelmäßigem HTML
  • Bereinige, standardisiere und validiere Daten für die Ausgabe in CSV, JSON oder Google Sheets
  • Bewältige Anti-Bot-Schutzmaßnahmen und sich verändernde Website-Strukturen im großen Maßstab
  • Arbeite mit AWS oder vergleichbarer Cloud-Infrastruktur sowie Docker-basierter Containerisierung
  • Setze LLM-Frameworks wie LangChain, OpenRouter oder ähnliche Tools in Automatisierungs-Workflows ein
  • Bewahre außergewöhnliche Detailgenauigkeit und Datenpräzision
  • Arbeite selbstständig und eigeninitiativ bei der Fehlersuche
  • Kommuniziere auf Englisch auf oberem Mittelstufenniveau (B2) oder höher
  • Ein Bachelor- oder Masterabschluss in Ingenieurwesen, angewandter Mathematik, Informatik oder einer verwandten technischen Fachrichtung ist von Vorteil
  • Ein Link zu einem GitHub-Profil ist von Vorteil

Zusatzleistungen

  • Freiberufliche Tätigkeit
  • Teilzeitbeschäftigung im Homeoffice
  • Etwa 10–20 Stunden pro Woche während aktiver Projektphasen
  • Möglichkeit, über die Mindrift-Plattform zu innovativen Technologieprojekten beizutragen

Ähnliche Stellen

Mindrift

Senior Python-Web-Scraping-Engineer – Remote in Brasilien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer sind Sie für zuverlässiges Web-Scraping, Datenvalidierung und die Bereitstellung strukturierter Datensätze für Mindrifts KI-Technologieprojekte verantwortlich. Die Rolle umfasst dynamische Websites, Anti-Bot-Systeme, Cloud-Infrastruktur und LLM-basierte Automatisierungstools.

Öffnen
Mindrift

Senior Python Data-Scraping-Ingenieur – Freiberuflich, Remote in Polen

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Mindrift sucht eine erfahrene Python-Fachkraft für den Aufbau zuverlässiger Web-Scraping-Workflows für KI-Projekte. Die Rolle konzentriert sich auf das Extrahieren, Validieren und Verarbeiten strukturierter Daten von komplexen, dynamischen Websites.

Öffnen
Mindrift

Senior Python Data-Scraping Engineer – Remote in Rumänien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer entwickelst du zuverlässige Web-Scraping- und Datenverarbeitungs-Workflows für Mindrifts Tendem-AI-Projekt. Der Schwerpunkt liegt auf der Extraktion, Validierung und Skalierung strukturierter Datensätze aus komplexen Websites.

Öffnen
Hewlett Packard Enterprise

Aruba-Kursentwickler – Remote in Mexiko

Hewlett Packard Enterprise

Entwickeln Sie kundenorientierte Kursunterlagen und technische Inhalte für Cloud-, Automatisierungs- und Managementprodukte von HPE Aruba Networking. Machen Sie komplexe Netzwerktechnologien zu praktischer Dokumentation und verständlichen Lernmaterialien.

Öffnen
Akamai Technologies

Senior Software Engineer, Sicherheitsdienste (Remote in Israel)

Akamai Technologies

Entwickeln Sie Browser-Sicherheit, Data Loss Prevention und KI-Funktionen bei Akamai. Leiten Sie cloudnative Microservices, die Millionen von Unternehmensarbeitsbereichen schützen.

Öffnen