Sciforium
Sciforium
Sciforium adalah perusahaan infrastruktur kecerdasan buatan yang membangun alat serverless untuk aplikasi multimodal produksi. API terpadu yang kompatibel dengan OpenAI memberi tim akses ke layanan teks, gambar, video, dan audio, serta hosting model, pustaka model, pipeline evaluasi waktu nyata, dan penerapan agen terkelola. Sciforium mengoperasikan perangkat keras GPU AMD yang terintegrasi secara vertikal, dengan fokus membantu tim mengembangkan, menilai, dan menerapkan sistem AI dengan kinerja yang dapat diprediksi, biaya lebih rendah, dan privasi yang lebih baik.

Insinyur Data Model Fondasi

Membangun dataset prapelatihan dan pascapelatihan berskala petabita untuk model AI multimodal Sciforium. Mengembangkan pipeline data berperforma tinggi untuk pelatihan bahasa, visi, dan video.

Deskripsi

  • Membangun dataset prapelatihan untuk model bahasa besar dari awal hingga akhir.
  • Memilih dan menyeimbangkan data web, kode, buku, dan makalah teknis untuk meningkatkan kinerja model pada tugas selanjutnya.
  • Membuat pipeline untuk membersihkan, menghapus duplikasi, dan mengekstrak sinyal dari data tak terstruktur berskala petabita.
  • Memimpin pengembangan dataset pascapelatihan, termasuk instruksi penyetelan halus terawasi, dialog multi-giliran, serta data preferensi RLHF/DPO.
  • Mengawasi pengadaan dan pemrosesan data visi dan video.
  • Menulis skrip pemrosesan data Python berthroughput tinggi dengan multiprocessing dan multithreading.
  • Menganalisis korpus pelatihan secara statistik untuk menemukan bias, kesenjangan pengetahuan, dan penurunan kualitas.
  • Membangun pipeline data sintetis untuk mengisi kekurangan dalam dataset yang dikumpulkan secara alami.
  • Menangani tantangan penyelarasan multimodal, kompresi video, dan konsistensi temporal.

Persyaratan

  • Memiliki setidaknya lima tahun pengalaman industri di bidang ilmu data atau pembelajaran mesin.
  • Terbukti berpengalaman membangun dan mengelola dataset untuk model fondasi.
  • Menguasai Python tingkat lanjut, termasuk multiprocessing, multithreading, dan pengelolaan memori yang efisien.
  • Berpengalaman bekerja dengan dataset berskala petabita untuk model bahasa besar atau model visi besar dalam produksi.
  • Berpengalaman membuat dataset pelatihan LLM berskala besar dari awal menggunakan hasil perayapan web mentah dan data domain khusus.
  • Memiliki pengalaman praktis membangun dataset untuk RLHF, DPO, dan kepatuhan instruksi multi-giliran.
  • Berpengalaman mengelola alur kerja pelabelan manusia dan dataset standar emas berkualitas tinggi.
  • Menguasai Spark, Ray, WebDataset, Parquet, atau kerangka kerja dan format sebanding untuk data berskala besar.
  • Pengalaman membangun dataset gambar atau video berskala besar dari awal menjadi nilai tambah.
  • Mengenal perayapan multimodal, pemrosesan video, codec, dan kompresi menjadi nilai tambah.
  • Pengalaman merancang skema pelabelan kompleks untuk tolok ukur penalaran, pemrograman, dan matematika menjadi nilai tambah.
  • Gelar master atau PhD di bidang kuantitatif dengan fokus pada AI yang berpusat pada data atau temu kembali informasi menjadi nilai tambah.
  • Memiliki izin hukum untuk bekerja di Amerika Serikat.

Tunjangan

  • Tunjangan kesehatan, gigi, dan penglihatan.
  • Program 401(k).
  • Makan siang, camilan, dan minuman setiap hari.
  • Cuti fleksibel.
  • Kompensasi kompetitif.
  • Kepemilikan saham.

Lowongan Terkait

Verana Health

Insinyur Backend Senior/Staf, Platform dan Ingesti Data

Verana Health

Bangun dan skalakan layanan ingest data klinis, OCR, OpenSearch, dan platform onkologi di Verana Health. Rancang API, pipeline ETL, dan layanan mikro untuk mendukung wawasan layanan kesehatan dunia nyata.

Buka
Berkshire Hathaway Homestate Companies - Workers Compensation Division

Manajer Senior Rekayasa Platform Data

Berkshire Hathaway Homestate Companies - Workers Compensation Division
501 – 1.000 Karyawan
AsuransiB2BKeuangan

Memimpin platform data perusahaan asuransi, tim rekayasa, dan operasionalnya di Azure, SQL, NoSQL, serta analitik. Mencakup keandalan, otomatisasi, kepatuhan, dan strategi platform.

Buka
Berkshire Hathaway Homestate Companies - Workers Compensation Division

Manajer Senior Rekayasa Platform Data

Berkshire Hathaway Homestate Companies - Workers Compensation Division
501 – 1.000 Karyawan
AsuransiB2BKeuangan

Pimpin tim rekayasa platform data yang mendukung operasi asuransi Berkshire Hathaway Homestate Companies. Peran ini mencakup platform basis data dan analitik, infrastruktur cloud, otomatisasi, keandalan, dan manajemen tim.

Buka