Mercor
Mercor
51 – 200 Karyawan
Profil Mercor yang tersedia tidak memuat informasi terverifikasi yang memadai tentang produk, layanan, pelanggan, sektor, atau fokus perekrutannya untuk mendukung gambaran perusahaan yang akurat. Diperlukan materi sumber tambahan sebelum bisnis atau peluang yang ditawarkannya dapat dijelaskan.

Pakar Red Team Keamanan AI (Bahasa Inggris dan Punjabi)

Mercor mencari pakar keamanan AI yang menguasai bahasa Inggris dan Punjabi untuk menguji model serta agen percakapan secara ofensif. Peran kontrak ini berfokus pada pengungkapan kerentanan, pembuatan kasus serangan, dan penyusunan laporan keamanan yang dapat direproduksi bagi pelanggan riset AI.

Deskripsi

  • Menguji model dan agen AI percakapan dengan jailbreak, injeksi prompt, skenario penyalahgunaan, eksploitasi bias, dan manipulasi multi-langkah
  • Mengevaluasi keluaran model pada topik sensitif, termasuk bias, misinformasi, dan perilaku berbahaya
  • Mendokumentasikan kegagalan, mengategorikan kerentanan, dan mengidentifikasi risiko sistemik
  • Menggunakan taksonomi, tolok ukur, dan panduan yang telah ditetapkan untuk menjaga konsistensi evaluasi
  • Membuat laporan, dataset, dan kasus serangan yang dapat direproduksi bagi pelanggan
  • Menyelidiki kelemahan sistem AI yang mungkin terlewat oleh pengujian otomatis
  • Memperluas cakupan evaluasi untuk membantu membatasi masalah tak terduga dalam produksi
  • Meningkatkan sistem AI pelanggan melalui red teaming yang dilakukan manusia dan berbasis data

Persyaratan

  • Kemahiran asli atau fasih dalam bahasa Inggris dan Punjabi
  • Penilaian yang kuat saat mengevaluasi bahasa dan konten
  • Kemampuan menentukan apakah respons AI akurat, lengkap, dan sesuai, serta menjelaskan penilaiannya
  • Perhatian yang cermat terhadap kesalahan kecil, ketidakkonsistenan, dan kelalaian
  • Kepatuhan yang konsisten terhadap panduan pengujian dan standar kualitas
  • Kemampuan menyampaikan alasan dengan jelas kepada audiens teknis maupun nonteknis
  • Fleksibilitas untuk bekerja pada berbagai proyek, format tugas, dan pelanggan
  • Ketersediaan untuk bekerja sebagai kontraktor independen
  • Tidak memerlukan dukungan H-1B atau STEM OPT
  • Keahlian yang diutamakan dapat mencakup pembelajaran mesin adversarial, dataset jailbreak, serangan injeksi prompt, serangan RLHF/DPO, ekstraksi model, pengujian penetrasi, pengembangan eksploit, rekayasa balik, pengujian pelecehan atau disinformasi, analisis penyalahgunaan, pengujian AI percakapan, psikologi, akting, atau penulisan

Tunjangan

  • Bekerja jarak jauh dari mana saja yang diizinkan oleh peran ini
  • Menentukan jadwal kerja sendiri
  • Menerima pembayaran mingguan melalui Stripe atau Wise untuk layanan yang diberikan
  • Proyek dapat diperpanjang, dikurangi, atau diakhiri lebih awal berdasarkan kebutuhan bisnis dan kinerja
  • Mendapatkan akses ke sumber daya kesehatan dan panduan yang jelas untuk proyek dengan sensitivitas lebih tinggi
  • Membangun pengalaman dalam red teaming AI berbasis data manusia
  • Membantu menjadikan sistem AI lebih tangguh, aman, dan dapat dipercaya
  • Kompensasi kompetitif
  • Berkolaborasi dengan peneliti AI terkemuka

Lowongan Terkait

Mozilla

Analis Data Senior, Telemetri Performa Firefox — Mozilla (Jarak Jauh, Kanada)

Mozilla

Analisis telemetri Gecko Firefox untuk membantu menentukan strategi performa peramban Mozilla. Bangun dasbor, tingkatkan kualitas telemetri, dan hubungkan performa mesin dengan perilaku pengguna.

Buka