Mindrift
Mindrift
Mindrift ir mākslīgā intelekta talantu tirgus un SaaS platforma, kas savieno profesionālus darba veicējus un konkrētu jomu ekspertus ar tehnoloģiju uzņēmumu mākslīgā intelekta apmācības un novērtēšanas projektiem. Kā Toloka daļa tā sadarbojas ar rakstniekiem, redaktoriem, kvalitātes nodrošināšanas speciālistiem, zinātniekiem un citiem jomu ekspertiem, kuri palīdz veidot apmācības datus, novērtēt modeļu drošību un spriestspēju, izvērtēt multivides kvalitāti un radīt reālās pasaules scenārijus mākslīgā intelekta veiktspējas un uzticamības uzlabošanai. Mindrift piesaista un pārbauda darba veicējus, izmantojot novērtējumus un identitātes verifikāciju, pēc tam piedāvājot elastīgas, apmaksātas projektu iespējas mākslīgā intelekta apmācības un novērtēšanas jomā.

Vecākais Python datu nokasīšanas inženieris – ārštata attālinātais darbs

Mindrift meklē vecāko Python inženieri, kurš izstrādātu uzticamas tīmekļa datu nokasīšanas un datu apstrādes darbplūsmas mākslīgā intelekta projektiem. Šis amats galvenokārt paredz strukturētu datu kopu iegūšanu, validēšanu un mērogošanu no sarežģītām tīmekļa vietnēm.

Apraksts

  • Vadi datu iegūšanas darbplūsmas no sākuma līdz beigām sarežģītās tīmekļa vietnēs
  • Nodrošini pilnīgas, precīzas un uzticamas strukturētas datu kopas
  • Izmanto pieejamos rīkus un pielāgotas darbplūsmas, lai paātrinātu datu vākšanu, validēšanu un uzdevumu izpildi
  • Iegūsti datus no dinamiskiem un interaktīviem avotiem, pielāgojoties ar JavaScript renderētam saturam un mainīgai tīmekļa vietņu darbībai
  • Uzturi datu kvalitāti, veicot validācijas pārbaudes, pārskatot konsekvenci starp avotiem, ievērojot formatēšanas prasības un veicot sistemātisku verifikāciju
  • Mērogo lielu datu kopu nokasīšanu, izmantojot efektīvu pakešu apstrādi vai paralēlo apstrādi
  • Uzraugi kļūmes un saglabā nokasīšanas programmas stabilitāti nelielu tīmekļa vietnes struktūras izmaiņu gadījumā
  • Strādā ar Apify, OpenRouter un citām atbilstošām tehnoloģijām

Prasības

  • Vairāk nekā 5 gadu atbilstoša pieredze datu inženierijā, tīmekļa datu nokasīšanā, automatizācijā vai programmatūras izstrādē
  • Angļu valodas zināšanas augstākajā vidējā līmenī, B2 vai augstākā līmenī
  • Plaša Python datu nokasīšanas pieredze ar BeautifulSoup, Selenium vai salīdzināmiem rīkiem, dinamisku saturu, piemēram, JavaScript, AJAX un bezgalīgo ritināšanu, kā arī ar starpniekserveru API
  • Spēja iegūt informāciju no sarežģītām struktūrām, tostarp hierarhijām, arhivētām lapām un nekonsekventa HTML
  • Pieredze datu tīrīšanā, normalizēšanā un validēšanā piegādei CSV, JSON vai Google Sheets formātā
  • Pieredze pretbotu mehānismu un mainīgu tīmekļa vietņu struktūru pārvaldībā lielā mērogā
  • Praktiska pieredze ar AWS vai līdzvērtīgu mākoņinfrastruktūru un Docker konteinerizāciju
  • Praktiska pieredze ar LangChain, OpenRouter vai līdzīgiem LLM ietvariem automatizācijai
  • Augsta uzmanība detaļām un apņemšanās nodrošināt datu precizitāti
  • Spēja strādāt patstāvīgi un efektīvi novērst problēmas
  • Bakalaura vai maģistra grāds inženierzinātnēs, lietišķajā matemātikā, datorzinātnēs vai saistītā tehniskā jomā tiks uzskatīts par priekšrocību
  • GitHub profila saite tiks uzskatīta par priekšrocību

Priekšrocības

  • Ārštata darbs
  • Nepilna laika attālināts darbs
  • Aktīvajās projekta fāzēs aptuveni 10–20 stundas nedēļā
  • Līdz 40 ASV dolāru stundas likmes ekvivalents atkarībā no pieredzes līmeņa un ieguldījuma tempa

Saistītās vakances

Terumo Medical Corporation

Region Manager, Terumo Interventional Systems Sales

Terumo Medical Corporation

Lead medical device sales across a North Central New Jersey region, managing field teams and hospital relationships. Drive regional revenue, sales performance, and compliant promotion of Terumo Interventional Systems products.

Atvērt