Mindrift
Mindrift
501 – 1.000 Mitarbeitende
Künstliche IntelligenzMarktplatzSaaS
Mindrift ist ein Talent-Marktplatz und eine SaaS-Plattform für künstliche Intelligenz, die professionelle Mitwirkende und Fachexperten mit Projekten von Technologieunternehmen zur Schulung und Bewertung von KI verbindet. Als Teil von Toloka arbeitet Mindrift mit Autoren, Redakteuren, QA-Spezialisten, Wissenschaftlern und weiteren Fachexperten zusammen, die Trainingsdaten erstellen, die Sicherheit und Schlussfolgerungsfähigkeit von Modellen beurteilen, die Qualität von Medien bewerten und realitätsnahe Szenarien zur Verbesserung der Leistung und Zuverlässigkeit von KI entwickeln. Mindrift rekrutiert und prüft Mitwirkende durch Assessments und Identitätsverifizierung und bietet anschließend flexible, vergütete Projektmöglichkeiten in den Bereichen KI-Training und -Bewertung.

Senior Python Data-Scraping-Ingenieur – Remote in Japan

Entwickle zuverlässige Python-Workflows für Web-Scraping im Tendem-AI-Projekt von Mindrift. Extrahiere, validiere und skaliere strukturierte Datensätze aus komplexen, dynamischen Websites.

Beschreibung

  • Leite die End-to-End-Datenextraktion über komplexe Websites hinweg
  • Liefere vollständige, genaue und zuverlässige strukturierte Datensätze
  • Nutze verfügbare Tools und individuelle Workflows, um Sammlung, Validierung und Aufgabenausführung zu beschleunigen
  • Extrahiere Daten aus dynamischen und interaktiven Quellen, einschließlich JavaScript-gerenderter Inhalte
  • Passe Scraping-Methoden an, wenn sich das Verhalten von Websites ändert
  • Sichere die Datenqualität durch Validierung, Vergleiche zwischen Quellen, Formatierungsstandards und systematische Überprüfung
  • Skaliere umfangreiches Scraping durch effiziente Stapelverarbeitung oder parallele Verarbeitung
  • Überwache Fehler und bewahre die Stabilität bei geringfügigen Änderungen der Website-Struktur
  • Setze Apify, OpenRouter und andere Technologien für Web-Extraktion und -Verarbeitung ein

Anforderungen

  • Mindestens 5 Jahre einschlägige Erfahrung in Datenengineering, Web-Scraping, Automatisierung oder Softwareentwicklung
  • Ein Bachelor- oder Masterabschluss in Ingenieurwesen, angewandter Mathematik, Informatik oder einem verwandten technischen Fachbereich ist von Vorteil
  • Fundierte Erfahrung mit Python-Scraping unter Verwendung von BeautifulSoup, Selenium oder ähnlichen Tools, dynamischen Inhalten wie JavaScript, AJAX und Infinite Scrolling sowie APIs, die über Proxys aufgerufen werden
  • Fähigkeit, Daten aus komplexen Strukturen zu extrahieren, einschließlich Hierarchien, archivierter Seiten und uneinheitlichem HTML
  • Fundierte Kenntnisse in Datenbereinigung, Normalisierung und Validierung sowie Erfahrung mit der Bereitstellung von CSV-, JSON- oder Google-Sheets-Datensätzen
  • Erfahrung im Umgang mit Anti-Bot-Mechanismen und dynamischen Website-Strukturen in großem Maßstab
  • Erfahrung mit AWS oder einer vergleichbaren Cloud-Infrastruktur
  • Erfahrung mit Docker zur Containerisierung
  • Praktische Erfahrung mit LLM-Frameworks wie LangChain, OpenRouter oder ähnlichen Tools zur Automatisierung
  • Ausgeprägte Aufmerksamkeit für Details und ausgeprägtes Engagement für Datengenauigkeit
  • Selbstständige Arbeitsweise mit der Fähigkeit zur eigenständigen Fehlerbehebung
  • Gute Englischkenntnisse auf fortgeschrittenem Mittelstufenniveau (B2) oder höher
  • Ein GitHub-Link ist von Vorteil

Zusatzleistungen

  • Freiberufliche Tätigkeit
  • Teilzeitarbeit, in aktiven Phasen voraussichtlich etwa 10–20 Stunden pro Woche
  • Remote-Arbeit
  • Möglichkeit, zu innovativen Technologie- und KI-Entwicklungsprojekten beizutragen

Ähnliche Stellen

F5

Senior Contract Manager für SaaS und Cloud

F5

Verhandeln Sie SaaS-, Cloud- und Technologieverträge zur Unterstützung des Cybersicherheitsgeschäfts von F5. Gestalten Sie gemeinsam mit Rechtsabteilung, Vertrieb, Finanzen und Sicherheitsteams skalierbare Vertragsprozesse.

Öffnen
Eventogy

Product Engineer (Frontend und Full Stack)

Eventogy
11 – 50 Mitarbeitende
BeratungMarketingReisen

Entwickle Eventogys Eventmanagement-Plattform mit Next.js, React, TypeScript und Laravel – von Admin-Tools und Teilnehmer-Websites bis zu APIs. Entwickle KI-gestützte Funktionen für Unternehmenskunden in regulierten Branchen.

Öffnen
Creative information Technology

Senior Java-Entwickler vor Ort in Virginia

Creative information Technology
11 – 50 Mitarbeitende
B2BHardwareSicherheit

Entwickeln Sie skalierbare Java-Microservices für CITI, einen IT-Dienstleister für Behörden und Unternehmen. Sie erstellen sichere Anwendungen für Identitäts-, Berechtigungs- und Zugriffsverwaltung.

Öffnen
CrowdStrike

Engineer III für Cloud-Authentifizierung und -Autorisierung

CrowdStrike

Entwickle Authentifizierungs- und Autorisierungsdienste für die globale Cybersicherheitsplattform von CrowdStrike. Gestalte die verteilte Backend-Entwicklung mit Go, AWS, Kafka und weiteren Technologien.

Öffnen