Mindrift
Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS
Mindrift ist ein Talent-Marktplatz und eine SaaS-Plattform für künstliche Intelligenz, die professionelle Mitwirkende und Fachexperten mit Projekten von Technologieunternehmen zur Schulung und Bewertung von KI verbindet. Als Teil von Toloka arbeitet Mindrift mit Autoren, Redakteuren, QA-Spezialisten, Wissenschaftlern und weiteren Fachexperten zusammen, die Trainingsdaten erstellen, die Sicherheit und Schlussfolgerungsfähigkeit von Modellen beurteilen, die Qualität von Medien bewerten und realitätsnahe Szenarien zur Verbesserung der Leistung und Zuverlässigkeit von KI entwickeln. Mindrift rekrutiert und prüft Mitwirkende durch Assessments und Identitätsverifizierung und bietet anschließend flexible, vergütete Projektmöglichkeiten in den Bereichen KI-Training und -Bewertung.

Senior Python-Web-Scraping-Ingenieur – Freiberuflich und remote

Entwickle zuverlässige Python-basierte Workflows für Web-Scraping und Datenverarbeitung in den KI-Projekten von Mindrift. Extrahiere, validiere und skaliere strukturierte Datensätze aus komplexen, dynamischen Websites.

Beschreibung

  • Verwalte durchgängige Extraktions-Workflows über komplexe Websites hinweg und liefere vollständige, genaue, strukturierte Datensätze
  • Nutze verfügbare Tools und individuelle Workflows, um Datenerfassung, Validierung und Aufgabenausführung anhand definierter Anforderungen zu beschleunigen
  • Passe Extraktionsmethoden an JavaScript-gerenderte Inhalte, interaktive Quellen und sich änderndes Website-Verhalten an
  • Wende Validierungen, quellenübergreifende Prüfungen, Formatierungskontrollen und systematische Verifizierungen an, um die Datenqualität zu sichern
  • Skaliere das Scraping großer Datensätze durch effiziente Stapelverarbeitung oder parallele Verarbeitung
  • Überwache Extraktionsfehler und bewahre die Stabilität bei geringfügigen Änderungen der Website-Struktur
  • Nutze deine Kenntnisse in Web-Scraping, Datenextraktion und Datenverarbeitung mit Tools wie Apify, OpenRouter und verwandten Technologien

Anforderungen

  • Mindestens 5 Jahre einschlägige Erfahrung in Datenengineering, Web-Scraping, Automatisierung oder Softwareentwicklung
  • Ein Bachelor- oder Masterabschluss in Ingenieurwesen, angewandter Mathematik, Informatik oder einem verwandten technischen Fachgebiet ist von Vorteil
  • Fundierte technische Kenntnisse mit praktischer Erfahrung in Skripterstellung, Automatisierung und Workflows zur Datenextraktion
  • Umfangreiche Erfahrung im Python-Scraping mit BeautifulSoup, Selenium oder ähnlichen Tools, einschließlich JavaScript, AJAX, Infinite Scrolling und proxybasierten APIs
  • Fähigkeit, Daten aus komplexen Hierarchien, archivierten Seiten und uneinheitlichen HTML-Strukturen zu extrahieren
  • Erfahrung in der Bereinigung, Normalisierung und Validierung strukturierter Datensätze in CSV, JSON oder Google Sheets
  • Erfahrung im Umgang mit Anti-Bot-Mechanismen und sich ändernden Website-Strukturen im großen Maßstab
  • Praktische Erfahrung mit AWS oder einer vergleichbaren Cloud-Infrastruktur sowie der Containerisierung mit Docker
  • Praktische Erfahrung mit LangChain, OpenRouter oder ähnlichen LLM-Frameworks für Automatisierungsaufgaben
  • Ausgeprägte Liebe zum Detail und starkes Engagement für Datengenauigkeit
  • Selbstständige Arbeitsweise mit der Fähigkeit zur eigenständigen Fehlerbehebung
  • Sehr gute Englischkenntnisse auf B2-Niveau oder höher
  • Ein GitHub-Link ist von Vorteil

Zusatzleistungen

  • Freiberufliche Tätigkeit
  • Teilzeitarbeit im Homeoffice
  • Etwa 10–20 Stunden pro Woche während aktiver Projektphasen

Ähnliche Stellen

Mindrift

Senior Python-Web-Scraping-Engineer – Remote in Brasilien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer sind Sie für zuverlässiges Web-Scraping, Datenvalidierung und die Bereitstellung strukturierter Datensätze für Mindrifts KI-Technologieprojekte verantwortlich. Die Rolle umfasst dynamische Websites, Anti-Bot-Systeme, Cloud-Infrastruktur und LLM-basierte Automatisierungstools.

Öffnen
Mindrift

Senior Python Data-Scraping-Ingenieur – Freiberuflich, Remote in Polen

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Mindrift sucht eine erfahrene Python-Fachkraft für den Aufbau zuverlässiger Web-Scraping-Workflows für KI-Projekte. Die Rolle konzentriert sich auf das Extrahieren, Validieren und Verarbeiten strukturierter Daten von komplexen, dynamischen Websites.

Öffnen
Mindrift

Senior Python Data-Scraping Engineer – Remote in Rumänien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer entwickelst du zuverlässige Web-Scraping- und Datenverarbeitungs-Workflows für Mindrifts Tendem-AI-Projekt. Der Schwerpunkt liegt auf der Extraktion, Validierung und Skalierung strukturierter Datensätze aus komplexen Websites.

Öffnen
Hewlett Packard Enterprise

Aruba-Kursentwickler – Remote in Mexiko

Hewlett Packard Enterprise

Entwickeln Sie kundenorientierte Kursunterlagen und technische Inhalte für Cloud-, Automatisierungs- und Managementprodukte von HPE Aruba Networking. Machen Sie komplexe Netzwerktechnologien zu praktischer Dokumentation und verständlichen Lernmaterialien.

Öffnen
Akamai Technologies

Senior Software Engineer, Sicherheitsdienste (Remote in Israel)

Akamai Technologies

Entwickeln Sie Browser-Sicherheit, Data Loss Prevention und KI-Funktionen bei Akamai. Leiten Sie cloudnative Microservices, die Millionen von Unternehmensarbeitsbereichen schützen.

Öffnen