Mindrift
Mindrift
Mindrift to marketplace talentów w dziedzinie sztucznej inteligencji oraz platforma SaaS, która łączy profesjonalnych współtwórców i ekspertów branżowych z projektami firm technologicznych dotyczącymi trenowania i oceny systemów AI. Jako część Toloka firma współpracuje z autorami, redaktorami, specjalistami ds. zapewniania jakości, naukowcami i innymi ekspertami dziedzinowymi, którzy pomagają tworzyć dane treningowe, oceniać bezpieczeństwo i zdolność modeli do rozumowania, sprawdzać jakość materiałów multimedialnych oraz opracowywać realistyczne scenariusze zwiększające skuteczność i niezawodność AI. Mindrift pozyskuje i weryfikuje współtwórców za pomocą testów oraz weryfikacji tożsamości, a następnie oferuje elastyczne, płatne projekty związane z trenowaniem i oceną AI.

Starszy inżynier ds. scrapingu danych w Pythonie — praca freelance, zdalnie z Indii

Mindrift poszukuje starszego inżyniera Pythona do pozyskiwania, walidowania i skalowania procesów pracy ze strukturyzowanymi danymi internetowymi w ramach projektu Tendem AI. Rola obejmuje Python, infrastrukturę chmurową, Docker oraz oparte na LLM frameworki automatyzacji.

Opis

  • Zarządzanie kompleksowymi procesami pozyskiwania danych z trudnych witryn internetowych
  • Dostarczanie ustrukturyzowanych zbiorów danych o pełnym pokryciu, wysokiej dokładności i przewidywalnym czasie realizacji
  • Wykorzystywanie wyspecjalizowanych narzędzi i dopasowanych procesów pracy w celu przyspieszenia gromadzenia danych, walidacji i realizacji zadań
  • Pozyskiwanie informacji z dynamicznych i interaktywnych źródeł, w tym stron renderowanych za pomocą JavaScript
  • Dostosowywanie metod scrapingu do zmian w zachowaniu witryn i strukturze stron
  • Utrzymywanie jakości danych dzięki walidacji, porównywaniu danych z różnych źródeł, standardom formatowania i systematycznemu przeglądowi
  • Skalowanie scrapingu dużych wolumenów danych dzięki wydajnemu przetwarzaniu wsadowemu i równoległemu
  • Śledzenie błędów i wspieranie niezawodnego, stabilnego działania procesów scrapingu
  • Wykorzystywanie wiedzy z zakresu Pythona, scrapingu internetowego, pozyskiwania i przetwarzania danych w projekcie Tendem

Wymagania

  • Ponad 5 lat odpowiedniego doświadczenia w inżynierii danych, scrapingu internetowym, automatyzacji lub tworzeniu oprogramowania
  • Wykształcenie licencjackie lub magisterskie w dziedzinie inżynierii, matematyki stosowanej, informatyki lub pokrewnej dziedzinie technicznej będzie dodatkowym atutem
  • Silne praktyczne podstawy w zakresie skryptów, automatyzacji i procesów pozyskiwania danych
  • Zaawansowane doświadczenie w scrapingu w Pythonie z użyciem BeautifulSoup, Selenium lub porównywalnych narzędzi, dynamicznych treści i interfejsów API opartych na proxy
  • Umiejętność pozyskiwania informacji ze złożonych struktur, w tym hierarchii, stron archiwalnych i niespójnego kodu HTML
  • Duże doświadczenie w czyszczeniu, normalizacji i walidacji danych
  • Praktyczne doświadczenie w zarządzaniu zabezpieczeniami antybotowymi i dynamicznymi strukturami witryn na dużą skalę
  • Doświadczenie z AWS lub porównywalną infrastrukturą chmurową oraz konteneryzacją Docker
  • Praktyczne wykorzystanie LangChain, OpenRouter lub podobnych frameworków LLM do automatyzacji
  • Skrupulatne podejście do dokładności i jakości danych
  • Umiejętność samodzielnego rozwiązywania problemów i proaktywnego zarządzania zadaniami
  • Znajomość języka angielskiego na poziomie wyższym średniozaawansowanym (B2) lub wyższym
  • Link do GitHub będzie dodatkowym atutem

Benefity

  • Współpraca freelance
  • Częściowa praca zdalna z Indii
  • Około 10–20 godzin tygodniowo podczas aktywnych etapów projektu
  • Możliwość pracy nad projektami technologicznymi za pośrednictwem platformy Mindrift
  • Wynagrodzenie do równowartości 30 USD za godzinę, zależnie od poziomu doświadczenia i tempa realizacji

Powiązane oferty pracy

Lighthouse

Specjalista ds. przetwarzania danych eDiscovery — praca zdalna

Lighthouse

Przetwarzaj dane eDiscovery za pomocą Nuix i Relativity One, przygotowuj materiały do przeglądu i przeprowadzaj kontrole jakości. Koordynuj pilne prośby klientów i dbaj o płynny przebieg prac podczas przekazywania zadań między zespołami.

Otwórz
Miratech

Starszy programista Java

Miratech

Twórz systemy administracji podatkowej w Javie dla klientów Miratech z sektora publicznego w zdalnej roli w Polsce. Rozwijaj mikrousługi, integracje, testy i procesy CI/CD w złożonych projektach transformacji cyfrowej.

Otwórz
F

Pracownik ds. wprowadzania danych, praca w niepełnym wymiarze godzin na miejscu

FlexScreen / Ritescreen

Prowadzenie dokładnych danych klientów i operacyjnych dla zakładu RiteScreen produkującego moskitiery do okien i drzwi tarasowych. Weryfikowanie informacji i wspieranie obsługi klienta w uporządkowanym i bezpiecznym zarządzaniu danymi.

Otwórz
Miratech

Starszy programista Java — systemy administracji podatkowej

Miratech

Twórz bezpieczne oprogramowanie do administracji podatkowej dla klientów Miratech z sektora publicznego. Rozwijaj mikrousługi Java i integracje oraz uczestnicz w testowaniu i pracach CI/CD.

Otwórz