Mindrift
Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS
Mindrift ist ein Talent-Marktplatz und eine SaaS-Plattform für künstliche Intelligenz, die professionelle Mitwirkende und Fachexperten mit Projekten von Technologieunternehmen zur Schulung und Bewertung von KI verbindet. Als Teil von Toloka arbeitet Mindrift mit Autoren, Redakteuren, QA-Spezialisten, Wissenschaftlern und weiteren Fachexperten zusammen, die Trainingsdaten erstellen, die Sicherheit und Schlussfolgerungsfähigkeit von Modellen beurteilen, die Qualität von Medien bewerten und realitätsnahe Szenarien zur Verbesserung der Leistung und Zuverlässigkeit von KI entwickeln. Mindrift rekrutiert und prüft Mitwirkende durch Assessments und Identitätsverifizierung und bietet anschließend flexible, vergütete Projektmöglichkeiten in den Bereichen KI-Training und -Bewertung.

Senior Python Data-Scraping-Ingenieur – Remote in Indien

Senior-Python-Ingenieur für den Aufbau zuverlässiger Scraping-Workflows für Mindrifts KI-Projekt Tendem. Der Schwerpunkt liegt auf der Extraktion, Validierung und Skalierung strukturierter Daten aus komplexen, dynamischen Websites.

Beschreibung

  • Verantwortung für vollständige Datenextraktions-Workflows über komplexe Websites hinweg, mit breiter Abdeckung, hoher Genauigkeit und zuverlässiger Bereitstellung strukturierter Datensätze.
  • Verfügbare Tools und maßgeschneiderte Workflows zur Verbesserung von Datenerfassung, Validierung und Aufgabenausführung einsetzen und dabei definierte Anforderungen erfüllen.
  • Daten zuverlässig aus dynamischen und interaktiven Quellen extrahieren, indem auf JavaScript-gerenderte Inhalte und sich veränderndes Website-Verhalten reagiert wird.
  • Datenqualität durch Validierungsprüfungen, Vergleiche zwischen Quellen, Formatierungskontrollen und systematische Überprüfung vor der Bereitstellung sicherstellen.
  • Scraping großer Datenmengen durch effiziente Batch-Verarbeitung und parallele Verarbeitung skalieren.
  • Fehler bei der Extraktion nachverfolgen und die Stabilität der Workflows bei geringfügigen Änderungen der Website-Struktur gewährleisten.
  • Expertise in Web-Scraping, Datenextraktion und Datenverarbeitung auf reale Anwendungsfälle im Tendem-Projekt anwenden.

Anforderungen

  • Mindestens 5 Jahre relevante Erfahrung in Datenengineering, Web-Scraping, Automatisierung oder Softwareentwicklung.
  • Fundierte Erfahrung mit Python-Scraping und BeautifulSoup, Selenium oder vergleichbaren Tools, einschließlich JavaScript, AJAX, Infinite Scrolling und proxybasiertem API-Zugriff.
  • Fähigkeit, Informationen aus komplexen Strukturen wie Hierarchien, archivierten Seiten und uneinheitlichem HTML zu extrahieren.
  • Praktische Erfahrung in der Bereinigung, Normalisierung und Validierung von Daten für die Bereitstellung in CSV-, JSON- oder Google-Sheets-Formaten.
  • Erfahrung im Umgang mit Anti-Bot-Maßnahmen und sich ändernden Website-Strukturen in groß angelegten Scraping-Workflows.
  • Praktische Erfahrung mit AWS oder vergleichbarer Cloud-Infrastruktur sowie Docker-basierter Containerisierung in produktiven Workflows.
  • Erfahrung mit dem Einsatz von LLM-Frameworks wie LangChain, OpenRouter oder vergleichbaren Tools für Automatisierungsaufgaben.
  • Ausgeprägte Detailgenauigkeit und konsequenter Fokus auf Datenqualität.
  • Fähigkeit, selbstständig zu arbeiten, Probleme zu untersuchen und effektiv zu beheben.
  • Sehr gute Englischkenntnisse auf B2-Niveau oder höher.

Zusatzleistungen

  • Freiberufliche Tätigkeit.
  • Teilzeit-Fernarbeit aus Indien.
  • Etwa 10–20 Stunden pro Woche während aktiver Projektphasen.

Ähnliche Stellen

Mindrift

Senior Python-Web-Scraping-Engineer – Remote in Brasilien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer sind Sie für zuverlässiges Web-Scraping, Datenvalidierung und die Bereitstellung strukturierter Datensätze für Mindrifts KI-Technologieprojekte verantwortlich. Die Rolle umfasst dynamische Websites, Anti-Bot-Systeme, Cloud-Infrastruktur und LLM-basierte Automatisierungstools.

Öffnen
Mindrift

Senior Python Data-Scraping-Ingenieur – Freiberuflich, Remote in Polen

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Mindrift sucht eine erfahrene Python-Fachkraft für den Aufbau zuverlässiger Web-Scraping-Workflows für KI-Projekte. Die Rolle konzentriert sich auf das Extrahieren, Validieren und Verarbeiten strukturierter Daten von komplexen, dynamischen Websites.

Öffnen
Mindrift

Senior Python Data-Scraping Engineer – Remote in Rumänien

Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS

Als Senior-Python-Engineer entwickelst du zuverlässige Web-Scraping- und Datenverarbeitungs-Workflows für Mindrifts Tendem-AI-Projekt. Der Schwerpunkt liegt auf der Extraktion, Validierung und Skalierung strukturierter Datensätze aus komplexen Websites.

Öffnen
Hewlett Packard Enterprise

Aruba-Kursentwickler – Remote in Mexiko

Hewlett Packard Enterprise

Entwickeln Sie kundenorientierte Kursunterlagen und technische Inhalte für Cloud-, Automatisierungs- und Managementprodukte von HPE Aruba Networking. Machen Sie komplexe Netzwerktechnologien zu praktischer Dokumentation und verständlichen Lernmaterialien.

Öffnen
Akamai Technologies

Senior Software Engineer, Sicherheitsdienste (Remote in Israel)

Akamai Technologies

Entwickeln Sie Browser-Sicherheit, Data Loss Prevention und KI-Funktionen bei Akamai. Leiten Sie cloudnative Microservices, die Millionen von Unternehmensarbeitsbereichen schützen.

Öffnen