Mindrift
Mindrift
501 – 1.000 Karyawan
Kecerdasan buatanMarketplaceSaaS
Mindrift adalah pasar bakat kecerdasan buatan dan platform SaaS yang menghubungkan kontributor profesional serta pakar bidang dengan proyek pelatihan dan evaluasi AI dari perusahaan teknologi. Sebagai bagian dari Toloka, Mindrift bekerja sama dengan penulis, editor, spesialis QA, ilmuwan, dan pakar bidang lainnya untuk membantu menghasilkan data pelatihan, menilai keamanan dan kemampuan penalaran model, mengevaluasi kualitas media, serta menciptakan skenario dunia nyata guna meningkatkan kinerja dan keandalan AI. Mindrift merekrut dan memverifikasi kontributor melalui penilaian dan verifikasi identitas, kemudian menawarkan peluang proyek berbayar yang fleksibel dalam pekerjaan pelatihan dan evaluasi AI.

Insinyur Senior Python untuk Web Scraping - Remote Brasil

Insinyur Python senior yang bertanggung jawab atas web scraping yang andal, validasi data, dan penyediaan dataset terstruktur untuk proyek teknologi AI Mindrift. Peran ini mencakup situs web dinamis, sistem anti-bot, infrastruktur cloud, dan alat otomasi berbasis LLM.

Deskripsi

  • Memimpin seluruh alur kerja ekstraksi data di berbagai situs web kompleks
  • Menyediakan dataset terstruktur dengan cakupan menyeluruh, akurasi tinggi, dan waktu penyelesaian yang andal
  • Menggunakan alat yang tersedia dan alur kerja khusus untuk mempercepat pengumpulan data, validasi, dan pelaksanaan tugas
  • Mengekstrak informasi dari sumber dinamis dan interaktif, termasuk halaman yang dirender dengan JavaScript
  • Menyesuaikan metode scraping seiring perubahan perilaku situs web
  • Menjaga kualitas data melalui validasi, pemeriksaan lintas sumber, persyaratan pemformatan, dan verifikasi sistematis
  • Meningkatkan skala scraping bervolume besar melalui batching yang efisien atau pemrosesan paralel
  • Melacak kegagalan dan menjaga stabilitas saat terjadi perubahan kecil pada struktur situs web
  • Mengintegrasikan alat seperti Apify, OpenRouter, dan teknologi terkait ke dalam alur kerja scraping dan pemrosesan

Persyaratan

  • Setidaknya lima tahun pengalaman yang relevan dalam rekayasa data, web scraping, otomasi, atau pengembangan perangkat lunak
  • Gelar sarjana atau magister dalam bidang teknik, matematika terapan, ilmu komputer, atau disiplin teknis terkait menjadi nilai tambah
  • Memiliki dasar teknis yang kuat dengan pengalaman praktis dalam scripting, otomasi, dan alur kerja ekstraksi data
  • Pengalaman luas dalam scraping dengan Python menggunakan BeautifulSoup, Selenium atau alat sebanding, konten dinamis, dan API berbasis proxy
  • Mampu mengekstrak informasi dari struktur kompleks, termasuk hierarki, halaman arsip, dan HTML yang tidak konsisten
  • Pengalaman yang solid dalam pembersihan, normalisasi, dan validasi data
  • Terbukti mampu menangani sistem anti-bot dan struktur situs web dinamis dalam skala besar
  • Pengalaman dengan AWS atau infrastruktur cloud sebanding serta containerisasi Docker
  • Pengalaman praktis menerapkan LangChain, OpenRouter, atau framework LLM serupa untuk tugas otomasi
  • Memiliki perhatian tinggi terhadap detail dan dedikasi terhadap akurasi data
  • Mampu bekerja secara mandiri dan memecahkan masalah tanpa banyak arahan
  • Kemampuan bahasa Inggris tingkat menengah atas (B2) atau lebih tinggi
  • Tautan profil GitHub menjadi nilai tambah

Tunjangan

  • Keterlibatan sebagai pekerja lepas
  • Pekerjaan remote paruh waktu
  • Sekitar 10–20 jam per minggu selama fase proyek aktif
  • Kompensasi hingga setara $25 per jam, bergantung pada tingkat pengalaman dan kecepatan kontribusi
  • Kesempatan untuk mendukung proyek pengembangan teknologi dan AI yang inovatif

Lowongan Terkait

Terumo Medical Corporation

Manajer Wilayah, Sistem Intervensi — Philadelphia

Terumo Medical Corporation

Memimpin penjualan perangkat Terumo Interventional Systems kepada rumah sakit dan fasilitas rawat jalan di wilayah Philadelphia. Mengembangkan akun, mendukung prosedur, mengedukasi klinisi, dan mencapai sasaran penjualan wilayah.

Buka