Mindrift je tržnica talentov na področju umetne inteligence in platforma SaaS, ki povezuje profesionalne sodelavce ter strokovnjake za posamezna področja s projekti tehnoloških podjetij, povezanimi z učenjem in vrednotenjem umetne inteligence. Kot del podjetja Toloka sodeluje s pisci, uredniki, strokovnjaki za zagotavljanje kakovosti, znanstveniki in drugimi strokovnjaki, ki pomagajo ustvarjati učne podatke, ocenjevati varnost in sposobnost sklepanja modelov, preverjati kakovost medijskih vsebin ter oblikovati scenarije iz resničnega sveta za izboljšanje delovanja in zanesljivosti umetne inteligence. Mindrift sodelavce pridobiva in preverja z ocenjevanji ter preverjanjem identitete, nato pa ponuja prilagodljive plačane projektne priložnosti na področju učenja in vrednotenja umetne inteligence.
Višji Python inženir za spletno pridobivanje podatkov — delo na daljavo na Filipinih
Mindrift išče višjega inženirja za Python za vzpostavitev zanesljivih postopkov pridobivanja podatkov za projekte umetne inteligence. Vloga je osredotočena na pridobivanje, preverjanje in skaliranje strukturiranih podatkov s kompleksnih dinamičnih spletnih mest.
Opis
- Upravljanje celotnih postopkov pridobivanja podatkov s kompleksnih spletnih mest
- Ustvarjanje strukturiranih podatkovnih zbirk, ki so temeljite, natančne in zanesljive
- Uporaba orodij in prilagojenih delovnih postopkov za pospešitev zbiranja, preverjanja in izvedbe nalog
- Zbiranje informacij iz dinamičnih in interaktivnih virov, vključno s stranmi, upodobljenimi z JavaScriptom
- Prilagajanje metod pridobivanja podatkov spreminjajočemu se vedenju in strukturam spletnih mest
- Zaščita kakovosti podatkov s preverjanjem, navzkrižnimi preverjanji virov, pravili oblikovanja in sistematičnim pregledom
- Skaliranje pridobivanja velikih količin podatkov z učinkovito paketno in vzporedno obdelavo
- Spremljanje napak pri pridobivanju in ohranjanje stabilnosti delovnih postopkov ob manjših spremembah spletnih mest
Zahteve
- Najmanj pet let ustreznih izkušenj na področju podatkovnega inženirstva, spletnega pridobivanja podatkov, avtomatizacije ali razvoja programske opreme
- Zaželena je diploma dodiplomskega ali magistrskega študija inženirstva, uporabne matematike, računalništva ali sorodne tehnične smeri
- Dokazane bogate izkušnje s pridobivanjem podatkov v Pythonu, orodji BeautifulSoup, Selenium ali primerljivimi orodji, dinamično vsebino in API-ji prek posredniških strežnikov
- Pridobivanje informacij iz kompleksnih virov, kot so hierarhije, arhivirane strani in nedosleden HTML
- Čiščenje, normalizacija in preverjanje podatkov za dostavo v oblikah CSV, JSON ali Google Sheets
- Obvladovanje zaščit pred boti in spreminjajočih se struktur spletnih mest pri obsežnih projektih pridobivanja podatkov
- Uporaba AWS ali primerljive oblačne infrastrukture ter kontejnerizacije na osnovi Dockerja
- Uporaba ogrodij LLM, kot so LangChain, OpenRouter ali podobna orodja, v delovnih postopkih avtomatizacije
- Izjemna pozornost do podrobnosti in dosleden poudarek na točnosti podatkov
- Samostojno delo pri diagnosticiranju in odpravljanju tehničnih težav
- Komuniciranje v angleščini na višji srednji ravni (B2) ali višji
Ugodnosti
- Sodelovanje pri samostojnem projektnem delu
- Delo na daljavo s krajšim delovnim časom
- Približno 10–20 ur na teden v aktivnih obdobjih projekta
- Plačilo do protivrednosti 30 USD na uro glede na raven izkušenj in hitrost prispevka