Mindrift
Mindrift
501 – 1.000 Karyawan
Kecerdasan buatanMarketplaceSaaS
Mindrift adalah pasar bakat kecerdasan buatan dan platform SaaS yang menghubungkan kontributor profesional serta pakar bidang dengan proyek pelatihan dan evaluasi AI dari perusahaan teknologi. Sebagai bagian dari Toloka, Mindrift bekerja sama dengan penulis, editor, spesialis QA, ilmuwan, dan pakar bidang lainnya untuk membantu menghasilkan data pelatihan, menilai keamanan dan kemampuan penalaran model, mengevaluasi kualitas media, serta menciptakan skenario dunia nyata guna meningkatkan kinerja dan keandalan AI. Mindrift merekrut dan memverifikasi kontributor melalui penilaian dan verifikasi identitas, kemudian menawarkan peluang proyek berbayar yang fleksibel dalam pekerjaan pelatihan dan evaluasi AI.

Insinyur Senior Scraping Data Python (Paruh Waktu, Jarak Jauh di Georgia)

Mindrift mencari insinyur Python senior untuk membangun alur kerja scraping yang andal bagi proyek teknologi AI. Peran ini berfokus pada pengambilan, validasi, dan penskalaan kumpulan data terstruktur dari situs web yang kompleks dan dinamis.

Deskripsi

  • Kelola alur kerja ekstraksi data menyeluruh di berbagai situs web kompleks
  • Hasilkan kumpulan data terstruktur yang lengkap, akurat, dan andal
  • Gunakan alat yang tersedia dan alur kerja khusus untuk mempercepat pengumpulan data, validasi, dan pelaksanaan tugas
  • Ekstrak data dari sumber web yang dinamis dan interaktif, termasuk halaman yang dirender dengan JavaScript
  • Sesuaikan metode scraping saat perilaku situs web berubah
  • Pertahankan kualitas data melalui pemeriksaan validasi, pengendalian konsistensi lintas sumber, persyaratan pemformatan, dan verifikasi sistematis
  • Skalakan scraping kumpulan data besar dengan batching yang efisien atau pemrosesan paralel
  • Pantau kegagalan dan pertahankan stabilitas saat terjadi perubahan kecil pada struktur situs web
  • Gabungkan alat seperti Apify dan OpenRouter dengan keahlian teknis yang relevan

Persyaratan

  • Setidaknya 5 tahun pengalaman yang relevan dalam rekayasa data, scraping web, otomatisasi, atau pengembangan perangkat lunak
  • Gelar sarjana atau magister dalam bidang teknik, matematika terapan, ilmu komputer, atau bidang teknis terkait lebih diutamakan
  • Pengalaman kuat dalam scraping web dengan Python menggunakan BeautifulSoup, Selenium, atau alat sebanding, termasuk konten dinamis dan API yang diakses melalui proksi
  • Terbukti mampu mengekstrak informasi dari struktur kompleks, termasuk hierarki, halaman arsip, dan HTML yang tidak konsisten
  • Pengalaman solid dalam membersihkan, menormalkan, dan memvalidasi data untuk diserahkan dalam format CSV, JSON, atau Google Sheets
  • Pengalaman praktis menangani mekanisme anti-bot dan struktur situs web dinamis dalam skala besar
  • Pengalaman menggunakan AWS atau infrastruktur cloud sebanding serta containerisasi berbasis Docker
  • Pengalaman langsung menerapkan kerangka kerja LLM seperti LangChain atau OpenRouter untuk tugas otomatisasi
  • Sangat teliti dan memiliki komitmen kuat terhadap keakuratan data
  • Mampu bekerja secara mandiri dan memecahkan masalah tanpa pengawasan ketat
  • Kemampuan bahasa Inggris tingkat menengah atas (B2) atau lebih tinggi
  • Tautan profil GitHub menjadi nilai tambah

Tunjangan

  • Pekerjaan lepas jarak jauh paruh waktu
  • Sekitar 10–20 jam per minggu selama fase proyek aktif
  • Mengerjakan proyek pengembangan teknologi dan AI

Lowongan Terkait

Advocate Aurora Health

Magang Sumber Daya Manusia

Advocate Aurora Health

Dukung perekrutan, orientasi karyawan baru, keterlibatan karyawan, dan operasional SDM di Advocate Aurora Health. Dapatkan pengalaman praktis dengan sistem SDM, pelaporan, dan peningkatan proses dalam magang jarak jauh.

Buka