Pinterest
Pinterest
1.001 – 5.000 Karyawan
Sponsor Visa H1BB2CMedia
Pinterest adalah platform penemuan visual tempat orang menemukan inspirasi, menyimpan ide, dan mengaturnya berdasarkan minat, proyek, serta pembelian. Pengalamannya memadukan rekomendasi yang dipersonalisasi dan pencarian visual dalam berbagai topik seperti desain rumah, mode, resep, dan acara, sekaligus membantu kreator dan peritel menjangkau audiens melalui alat perdagangan dan periklanan.

Insinyur Perangkat Lunak Senior Staf, Platform AI - Hibrida Palo Alto

Memimpin strategi, arsitektur, dan adopsi platform evaluasi AI serta pembelajaran mesin Pinterest. Membantu membangun praktik evaluasi yang andal untuk pengalaman GenAI di seluruh perusahaan.

Deskripsi

  • Mengidentifikasi peluang modernisasi dan memperluas peta jalan sistem evaluasi perusahaan dengan kepemimpinan teknis
  • Menetapkan arah teknis lintas fungsi, menyelaraskan tim mitra, dan meningkatkan adopsi kapabilitas evaluasi bersama
  • Membuat keputusan arsitektur jangka panjang yang memperkuat pengalaman pengguna dan keandalan platform evaluasi AI dan ML Pinterest
  • Mengembangkan metode dan standar evaluasi yang menggabungkan metrik otomatis, tinjauan ahli, umpan balik manusia, keselamatan, dan hasil bisnis
  • Memimpin inisiatif kompleks lintas tim, mengelola kompromi dan risiko teknis, serta menghasilkan dampak yang terukur
  • Mengembangkan platform evaluasi AI dan ML Pinterest menjadi sistem terpadu dan andal yang digunakan di seluruh perusahaan
  • Bekerja sama dengan tim teknik, riset, produk, dan keselamatan untuk meningkatkan kualitas, keputusan peluncuran, dan kepercayaan terhadap pengalaman berbasis AI

Persyaratan

  • Setidaknya 3 tahun pengalaman langsung dalam merancang dan mengoperasikan sistem evaluasi untuk GenAI dan sistem pembelajaran mesin yang kompleks
  • Pengalaman membuat tolok ukur dan kumpulan data acuan, menerapkan metrik otomatis dan evaluasi manusia, menggunakan penilaian berbasis model, serta menganalisis kegagalan
  • Kemahiran tinggi dalam Python
  • Pemahaman kerja tentang prinsip-prinsip sistem terdistribusi
  • Kemampuan beriterasi secara efektif dengan alat AI selama pengodean dan perancangan sistem
  • Pengetahuan luas tentang pustaka dan kerangka kerja evaluasi GenAI dan sistem rekomendasi, termasuk AutoEvals, OpenEvals, dan Ragas
  • Setidaknya 5 tahun pengalaman mengembangkan platform yang dapat diskalakan untuk eksperimen terdistribusi, pembuatan versi data dan model, orkestrasi, observabilitas, manajemen rilis, dan pemantauan produksi
  • Pertimbangan yang matang terkait risiko GenAI seperti ketahanan, bias, privasi, keamanan, dan keterbatasan sinyal evaluasi otomatis
  • Gelar sarjana dalam ilmu komputer, teknik, atau bidang terkait, atau pengalaman yang setara

Tunjangan

  • Berhak memperoleh ekuitas
  • Model kerja PinFlex yang fleksibel
  • Kolaborasi tatap muka sekali atau dua kali per kuartal
  • Tempat kerja yang memberikan kesempatan setara
  • Dukungan akomodasi medis atau keagamaan selama proses lamaran