Reality Defender (YC W22)
Reality Defender (YC W22)
Reality Defender utvikler AI-drevne verktøy som hjelper bedrifter, myndigheter og digitale plattformer med å identifisere syntetiske medier. Plattformen analyserer lyd, video, bilder og tekst for tegn på AI-generering, og støtter team innen medier, finans og offentlig forvaltning i arbeidet med å håndtere risikoer som svindel og desinformasjon. Selskapets tilnærming med flere modeller vurderer innhold sannsynlighetsbasert uten å være avhengig av vannmerker eller tidligere autentisering.

Senior data plattformingeniør

Led Databricks-dataplattformen bak Reality Defenders deepfake-forskning. Bygg reproduserbare multimodale datasett og skalerbare pipelines for syntetiske data.

Beskrivelse

  • Led den komplette dataplattformen for AI-forskning, fra kontinuerlig innlesing og forbehandling til styring og eksport av store mengder bilde-, video-, lyd- og tekstdata.
  • Utvid og skaler Databricks lakehouse og stakken for distribuert databehandling.
  • Veiled arkitektur og beslutninger om å bygge eller kjøpe løsninger etter hvert som datamengdene øker.
  • Utvikle gjenbrukbar infrastruktur for intern generering av syntetiske data på tvers av flere modaliteter.
  • Etabler versjonering av datasett, sporbarhet, metadata, kvalitetskontroller og konsekvente oppdelinger for trening og evaluering.
  • Ta ansvar for pålitelighet i pipelines, observerbarhet og behandlingskostnader per datasett.
  • Samarbeid med ML-forskere om å bygge selvbetjeningsverktøy som gjør modellutviklingen raskere.
  • Veiled ingeniører og styrk kodegjennomgang, testing, dokumentasjon og driftsveiledninger.
  • Koordiner med sikkerhets- og etterlevelses team om datahåndtering, lisensiering og tilgangskontroller.
  • Sett den langsiktige veikartet for dataplattformen sammen med ledere innen teknologi og forskning.
  • Rapporter til direktøren for data.
  • I løpet av de første 12 månedene skal du lede en moden selvbetjeningsplattform, utvide genereringen av syntetiske data, levere reproduserbare evalueringsdatasett og drive veikartinitiativer med stor effekt.

Krav

  • Minst 8 års erfaring med å bygge dataplattformer eller infrastruktur, inkludert ansvar på senior- eller ledernivå for produksjonspipelines som genererer, leser inn eller leverer store datamengder.
  • Omfattende praktisk erfaring med verktøy for distribuert databehandling som Spark eller Ray og lakehouse-plattformer, helst Databricks, med skylagring av objekter som S3, GCS eller Azure Blob.
  • Produksjonserfaring med Databricks, Unity Catalog, Delta Lake og Spark på AWS, inkludert ytelsesjustering, tilgangskontroller og operativ feilsøking.
  • Erfaring med store mengder ustrukturert medieinnhold, som video, lyd eller bilder, inkludert store filer, dekoding, omkoding og metadata i stor skala.
  • Dokumenterte resultater med å produsere reproduserbare ML-datasett gjennom versjonering, sporbarhet, validering av datakvalitet og orkestrering med verktøy som Airflow, Dagster eller Databricks Workflows.
  • Gode ferdigheter i Python og SQL.
  • God dømmekraft og evne til å ta eierskap for uklare plattformutfordringer fra start til slutt i et lite team.
  • Erfaring med å automatisere infrastruktur og utrullinger med Terraform og CI/CD, inkludert AWS-lagring, IAM, datakraft, Databricks-ressurser og miljøer for distribuert databehandling.
  • Erfaring med utvikling av pipelines for generering av syntetiske data eller drift av generative modeller i stor skala er en fordel.
  • Erfaring med å støtte ML-forskerteam med trenings- og evalueringsdata, særlig for multimodale modeller, er en fordel.
  • Erfaring innen sikkerhet, svindel, tillit og trygghet, et annet adversarialt felt eller en startup i serie A eller B er en fordel.
  • Søknaden ber om tillatelse til å arbeide i USA.
  • Villighet til å flytte dersom du ikke allerede bor i eller nær New York City, avhengig av arbeidsordningen.

Fordeler

  • Arbeidsgiveren dekker hele helseforsikringspremien for ansatte og en del av premien for forsørgede.
  • Arbeidsgiveren dekker hele tann- og synsforsikringspremien for ansatte og forsørgede.
  • Arbeidsgiveren dekker hele premien for kort- og langsiktig uføreforsikring og livsforsikring for ansatte.
  • Fleksible utgiftskontoer og helsesparekontoer, samt en 401(k)-ordning.
  • Aksjebasert kompensasjon.
  • 20 betalte feriedager i året.
  • 12 ukers foreldrepermisjon.
  • Budsjett for læring og utvikling.
  • Månedlige velværefordeler.
  • Årlig firmabetalt samling utenfor kontoret.
  • Daglig lunsj på kontoret via Uber Eats for ansatte ved hovedkontoret i New York City.
  • Pendlertilskudd for ansatte ved hovedkontoret i New York City.
  • Mulighet for hjemmekontor på fredager for ansatte ved hovedkontoret i New York City.
  • Etter-jobben-arrangementer og andre lokale aktiviteter for ansatte ved hovedkontoret i New York City.
  • Mulighet for en årlig resultatbonus.

Relaterte jobber

Public Partnerships | PPL

Principal dataarkitekt for Databricks og Azure

Public Partnerships | PPL

Led utformingen av styrte analyseplattformer med Databricks og Azure for økonomistyring av Medicaid-tjenester. Bygg masterdatafunksjoner, koble sammen identiteter for deltakere og tilbydere, og lever regelverkstilpassede dataprodukter i landsdekkende skala.

Åpne