Mindrift
Mindrift
Mindrift to marketplace talentów w dziedzinie sztucznej inteligencji oraz platforma SaaS, która łączy profesjonalnych współtwórców i ekspertów branżowych z projektami firm technologicznych dotyczącymi trenowania i oceny systemów AI. Jako część Toloka firma współpracuje z autorami, redaktorami, specjalistami ds. zapewniania jakości, naukowcami i innymi ekspertami dziedzinowymi, którzy pomagają tworzyć dane treningowe, oceniać bezpieczeństwo i zdolność modeli do rozumowania, sprawdzać jakość materiałów multimedialnych oraz opracowywać realistyczne scenariusze zwiększające skuteczność i niezawodność AI. Mindrift pozyskuje i weryfikuje współtwórców za pomocą testów oraz weryfikacji tożsamości, a następnie oferuje elastyczne, płatne projekty związane z trenowaniem i oceną AI.

Starszy inżynier ds. scrapingu danych w Pythonie — praca zdalna na Filipinach

Mindrift poszukuje starszego inżyniera Python do tworzenia niezawodnych procesów scrapingu danych na potrzeby projektów związanych ze sztuczną inteligencją. Rola koncentruje się na pozyskiwaniu, walidacji i skalowaniu uporządkowanych danych ze złożonych, dynamicznych stron internetowych.

Opis

  • Zarządzać pełnymi procesami ekstrakcji danych ze złożonych stron internetowych
  • Tworzyć kompletne, dokładne i niezawodne uporządkowane zbiory danych
  • Stosować narzędzia i dopasowane procesy w celu przyspieszenia gromadzenia, walidacji i realizacji zadań
  • Pozyskiwać informacje z dynamicznych i interaktywnych źródeł, w tym ze stron renderowanych za pomocą JavaScriptu
  • Dostosowywać metody scrapingu do zmian w działaniu i strukturze stron internetowych
  • Chronić jakość danych dzięki walidacji, porównywaniu źródeł, zasadom formatowania i systematycznej weryfikacji
  • Skalować scraping dużych ilości danych dzięki wydajnemu przetwarzaniu wsadowemu i równoległemu
  • Śledzić błędy ekstrakcji i utrzymywać stabilność procesów mimo niewielkich zmian na stronach internetowych

Wymagania

  • Mieć co najmniej pięć lat odpowiedniego doświadczenia w inżynierii danych, web scrapingu, automatyzacji lub tworzeniu oprogramowania
  • Preferowane jest wykształcenie wyższe licencjackie lub magisterskie w dziedzinie inżynierii, matematyki stosowanej, informatyki lub pokrewnej dyscypliny technicznej
  • Wykazywać się dużym doświadczeniem w scrapingu danych w Pythonie z użyciem BeautifulSoup, Selenium lub porównywalnych narzędzi, dynamicznego kontentu i API obsługiwanych przez serwery proxy
  • Pozyskiwać informacje ze złożonych źródeł, takich jak hierarchie, strony archiwalne i niespójny kod HTML
  • Czyścić, normalizować i walidować dane do dostarczenia w formatach CSV, JSON lub Google Sheets
  • Radzić sobie z zabezpieczeniami przed botami i zmieniającą się strukturą stron internetowych w projektach scrapingu na dużą skalę
  • Korzystać z AWS lub porównywalnej infrastruktury chmurowej oraz konteneryzacji opartej na Dockerze
  • Stosować frameworki LLM, takie jak LangChain, OpenRouter lub podobne narzędzia, w procesach automatyzacji
  • Pracować z wyjątkową dbałością o szczegóły i konsekwentnym skupieniem na dokładności danych
  • Pracować samodzielnie, diagnozując i rozwiązując problemy techniczne
  • Posługiwać się językiem angielskim na poziomie wyższym niż średniozaawansowany (B2) lub wyższym

Benefity

  • Współpraca projektowa na zasadach freelancingu
  • Zdalna praca w niepełnym wymiarze godzin
  • Około 10–20 godzin tygodniowo w okresach aktywnych projektów
  • Wynagrodzenie do równowartości 30 USD za godzinę, zależnie od poziomu doświadczenia i tempa realizacji

Powiązane oferty pracy

MAËLYS

Projektant marki MAËLYS (praca hybrydowa, Izrael)

MAËLYS

Twórz kampanie cyfrowe, projekty e-maili, materiały drukowane i rozwiązania e-commerce dla globalnej marki MAËLYS, oferującej produkty do pielęgnacji ciała. Korzystaj z Figma, Adobe Creative Cloud i narzędzi AI, przygotowując dopracowane materiały spójne z marką.

Otwórz
Eli Lilly and Company

Zastępca dyrektora ds. analityki talentów i nauki o ocenie — Eli Lilly, Indianapolis, praca hybrydowa

Eli Lilly and Company

Kieruj strategią badania opinii pracowników Lilly i naukową oceną personelu. Wykorzystuj psychometrię, ewaluację programów i odpowiedzialną analitykę AI do podejmowania decyzji dotyczących pracowników.

Otwórz