LogoFresh Jobs Ahead
Reality Defender (YC W22)
Reality Defender (YC W22)
11 – 50 Anställda
Artificiell intelligensMediaSäkerhet
Reality Defender utvecklar AI-drivna verktyg som hjälper företag, myndigheter och digitala plattformar att identifiera syntetiskt medieinnehåll. Plattformen analyserar ljud, video, bilder och text för att upptäcka tecken på AI-generering och hjälper team inom medier, finans och offentlig förvaltning att hantera risker som bedrägerier och desinformation. Företagets metod med flera modeller bedömer innehåll sannolikhetsbaserat utan att vara beroende av vattenstämplar eller tidigare autentisering.
LinkedIn
Jobb på företaget

Senior data plattformsingenjör

Led Databricks-plattformen för Reality Defenders forskning om deepfake-detektering. Bygg reproducerbara multimodala datamängder och skalbara pipelines för syntetisk data.

USUSANYNew York
210 000 $ – 260 000 $ / år
DistansHeltidLeadObligatoriskt Språk: engelskaDataingenjör
AirflowAWSAzureMolnPythonRaySparkSQLTerraformUnity

Beskrivning

  • Led den kompletta dataplattformen för AI-forskning, från kontinuerlig inläsning och förbehandling till styrning och export av stora mängder bild-, video-, ljud- och textdata.
  • Utöka och skala Databricks lakehouse och stacken för distribuerad databehandling.
  • Vägled arkitekturen och beslut om att bygga eller köpa lösningar när datavolymerna ökar.
  • Utveckla återanvändbar infrastruktur för intern generering av syntetiska data i flera modaliteter.
  • Inför versionshantering av datamängder, spårbarhet, metadata, kvalitetskontroller samt enhetliga uppdelningar för träning och utvärdering.
  • Ansvara för pipeline-tillförlitlighet, observerbarhet och bearbetningskostnader per datamängd.
  • Samarbeta med ML-forskare för att bygga självbetjäningsverktyg som påskyndar modellutvecklingen.
  • Vägled ingenjörer och stärk kodgranskning, testning, dokumentation och operativa körinstruktioner.
  • Samordna med säkerhets- och regelefterlevnadsteamen kring datahantering, licensiering och åtkomstkontroller.
  • Ta fram den långsiktiga färdplanen för dataplattformen tillsammans med ledare inom teknik och forskning.
  • Rapportera till datadirektören.
  • Under de första 12 månaderna leder du arbetet med en mogen självbetjäningsplattform, utökar genereringen av syntetiska data, levererar reproducerbara utvärderingsdatamängder och driver initiativ med stor påverkan enligt färdplanen.

Krav

  • Minst 8 års erfarenhet av att bygga dataplattformar eller infrastruktur, inklusive ansvar på senior- eller ledarnivå för produktionspipelines som genererar, läser in eller levererar stora datavolymer.
  • Gedigen praktisk erfarenhet av verktyg för distribuerad databehandling, till exempel Spark eller Ray, och lakehouse-plattformar, helst Databricks, med molnlagring av objekt som S3, GCS eller Azure Blob.
  • Produktions­erfarenhet av Databricks, Unity Catalog, Delta Lake och Spark på AWS, inklusive prestandaoptimering, åtkomstkontroller och operativ felsökning.
  • Erfarenhet av att hantera stora mängder ostrukturerad media, såsom video, ljud eller bilder, inklusive stora filer, avkodning, omkodning och metadata i stor skala.
  • Dokumenterad erfarenhet av att skapa reproducerbara ML-datamängder genom versionshantering, spårbarhet, validering av datakvalitet och orkestrering med verktyg som Airflow, Dagster eller Databricks Workflows.
  • Goda kunskaper i Python och SQL.
  • Gott omdöme och förmåga att ta helhetsansvar för otydligt definierade plattformsutmaningar på ett litet team.
  • Erfarenhet av att automatisera infrastruktur och driftsättningar med Terraform och CI/CD, inklusive AWS-lagring, IAM, beräkning, Databricks-resurser och miljöer för distribuerad databehandling.
  • Erfarenhet av att utveckla pipelines för generering av syntetiska data eller köra generativa modeller i stor skala är meriterande.
  • Erfarenhet av att stötta ML-forskningsteam med tränings- och utvärderingsdata, särskilt för multimodala modeller, är meriterande.
  • Erfarenhet inom säkerhet, bedrägeribekämpning, tillit och trygghet, ett annat område med motståndare eller ett startupbolag i serie A eller B är meriterande.
  • I ansökan efterfrågas tillstånd att arbeta i USA.
  • Du är beredd att flytta om du inte redan bor i eller nära New York, beroende på arbetsarrangemanget.

Förmåner

  • Sjukvårdspremien för anställda täcks helt; en del av premien för anhöriga täcks.
  • Tandvårds- och synvårdspremier för anställda och anhöriga täcks helt.
  • Premier för kort- och långvarig sjukförsäkring samt livförsäkring för anställda täcks helt.
  • Flexibla utgiftskonton och hälsosparkonton samt ett 401(k)-program.
  • Aktieersättning.
  • 20 betalda semesterdagar per år.
  • 12 veckors föräldraledighet.
  • Budget för lärande och kompetensutveckling.
  • Månatliga friskvårdsförmåner.
  • Årlig företagsfinansierad konferensresa.
  • Daglig lunch på kontoret via Uber Eats för anställda på huvudkontoret i New York.
  • Pendlingsförmåner för anställda på huvudkontoret i New York.
  • Distansarbete på fredagar för anställda på huvudkontoret i New York.
  • After work och andra lokala evenemang för anställda på huvudkontoret i New York.
  • Möjlighet att få en årlig prestationsbonus.

Relaterade jobb

Public Partnerships | PPL

Principal dataarkitekt för Databricks och Azure

Public Partnerships | PPL
1 001 – 5 000 Anställda
Sponsor för H1B-visumB2BSjukförsäkring
USUSA
162 500 $ – 214 000 $ / år
DistansHeltidLeadObligatoriskt Språk: engelskaDataingenjör
ApacheAzureMolnPythonSparkSQLUnity

Led utformningen av styrda analysplattformar med Databricks och Azure för ekonomisk hantering av Medicaid-tjänster. Bygg funktioner för masterdata, koppla samman identiteter för deltagare och vårdgivare och leverera regelefterlevande dataprodukter i hela landet.

Öppna