LogoFresh Jobs Ahead
Reality Defender (YC W22)
Reality Defender (YC W22)
11 – 50 Pracownicy
BezpieczeństwoMediaSztuczna inteligencja
Reality Defender tworzy narzędzia oparte na sztucznej inteligencji, które pomagają przedsiębiorstwom, instytucjom publicznym i platformom cyfrowym identyfikować syntetyczne media. Platforma analizuje dźwięk, wideo, obrazy i tekst pod kątem oznak wygenerowania przez AI, wspierając zespoły z branży medialnej, finansowej i administracji publicznej w przeciwdziałaniu takim zagrożeniom jak oszustwa i dezinformacja. Dzięki podejściu opartemu na wielu modelach firma ocenia treści probabilistycznie, bez polegania na znakach wodnych ani wcześniejszym uwierzytelnieniu.
LinkedIn
Oferty pracy firmy

Główny inżynier platformy danych

Kieruj platformą danych opartą na Databricks, która wspiera badania Reality Defender nad wykrywaniem deepfake’ów. Twórz odtwarzalne multimodalne zbiory danych i skalowalne potoki generowania danych syntetycznych.

USStany ZjednoczoneNYNowy Jork
210 000 $ – 260 000 $ / rok
ZdalniePełny etatLeadWymagany Język: angielskiInżynier danych
AirflowAWSAzureChmuraPythonRaySparkSQLTerraformUnity

Opis

  • Kieruj całą platformą danych na potrzeby badań nad AI: od ciągłego pozyskiwania i wstępnego przetwarzania po zarządzanie i eksport dużych ilości danych obrazowych, wideo, audio i tekstowych.
  • Rozwijaj i skaluj lakehouse Databricks oraz stos rozproszonego przetwarzania.
  • Kieruj decyzjami dotyczącymi architektury oraz budowania lub zakupu rozwiązań w miarę wzrostu ilości danych.
  • Opracuj wielokrotnego użytku infrastrukturę do wewnętrznego generowania danych syntetycznych w wielu modalnościach.
  • Wprowadź wersjonowanie zbiorów danych, śledzenie pochodzenia, metadane, kontrole jakości oraz spójne podziały na potrzeby treningu i ewaluacji.
  • Odpowiadaj za niezawodność potoków, obserwowalność i koszty przetwarzania poszczególnych zbiorów danych.
  • Współpracuj z badaczami ML nad samoobsługowymi narzędziami przyspieszającymi rozwój modeli.
  • Mentoruj inżynierów oraz doskonal przeglądy kodu, testowanie, dokumentację i instrukcje operacyjne.
  • Koordynuj z zespołami ds. bezpieczeństwa i zgodności obsługę danych, licencjonowanie oraz kontrolę dostępu.
  • Wyznaczaj długoterminową mapę drogową platformy danych wspólnie z liderami zespołów inżynieryjnych i badawczych.
  • Podlegaj dyrektorowi ds. danych.
  • W ciągu pierwszych 12 miesięcy pokieruj dojrzałą platformą samoobsługową, rozwiń generowanie danych syntetycznych, dostarcz odtwarzalne zbiory ewaluacyjne i realizuj inicjatywy z mapy drogowej o dużym wpływie.

Wymagania

  • Co najmniej 8 lat doświadczenia w budowaniu platform danych lub infrastruktury, w tym odpowiedzialność na poziomie staff lub lead za produkcyjne potoki generujące, pobierające lub dostarczające duże ilości danych.
  • Rozległe praktyczne doświadczenie z narzędziami rozproszonego przetwarzania, takimi jak Spark lub Ray, oraz platformami lakehouse, najlepiej Databricks, z wykorzystaniem chmurowych magazynów obiektowych, takich jak S3, GCS lub Azure Blob.
  • Doświadczenie produkcyjne z Databricks, Unity Catalog, Delta Lake i Spark na AWS, w tym optymalizacja wydajności, kontrola dostępu i rozwiązywanie problemów operacyjnych.
  • Doświadczenie w obsłudze dużych ilości nieustrukturyzowanych mediów, takich jak wideo, audio lub obrazy, w tym dużych plików, dekodowania, transkodowania i metadanych na dużą skalę.
  • Udokumentowane osiągnięcia w tworzeniu odtwarzalnych zbiorów danych ML z użyciem wersjonowania, śledzenia pochodzenia, walidacji jakości danych i orkiestracji narzędziami takimi jak Airflow, Dagster lub Databricks Workflows.
  • Bardzo dobra znajomość Pythona i SQL.
  • Dobre wyczucie sytuacji i umiejętność samodzielnego przejmowania niejednoznacznych wyzwań platformowych od początku do końca w niewielkim zespole.
  • Doświadczenie w automatyzacji infrastruktury i wdrożeń za pomocą Terraform i CI/CD, w tym magazynów AWS, IAM, zasobów obliczeniowych, zasobów Databricks i środowisk rozproszonego przetwarzania.
  • Doświadczenie w tworzeniu potoków generowania danych syntetycznych lub uruchamianiu modeli generatywnych na dużą skalę będzie dodatkowym atutem.
  • Doświadczenie we wspieraniu zespołów badawczych ML danymi treningowymi i ewaluacyjnymi, szczególnie dla modeli multimodalnych, będzie dodatkowym atutem.
  • Doświadczenie w obszarze bezpieczeństwa, oszustw, zaufania i bezpieczeństwa użytkowników, innej dziedzinie o charakterze rywalizacyjnym albo w startupie serii A lub B będzie dodatkowym atutem.
  • Wniosek wymaga zgody na pracę w Stanach Zjednoczonych.
  • Gotowość do przeprowadzki, jeśli obecnie nie mieszkasz w Nowym Jorku lub jego pobliżu; zależnie od modelu pracy.

Benefity

  • Składki na ubezpieczenie zdrowotne pracownika są w pełni pokrywane, a dla osób na utrzymaniu dostępne jest częściowe pokrycie.
  • Składki na ubezpieczenie stomatologiczne i okulistyczne pracownika oraz osób na utrzymaniu są w pełni pokrywane.
  • Składki na krótkoterminowe i długoterminowe ubezpieczenie pracownika od niezdolności do pracy oraz ubezpieczenie na życie są w pełni pokrywane.
  • Elastyczne konta wydatków i konta oszczędnościowe na cele zdrowotne oraz program 401(k).
  • Udziały w firmie jako składnik wynagrodzenia.
  • 20 dni płatnego urlopu rocznie.
  • 12 tygodni urlopu rodzicielskiego.
  • Budżet na naukę i rozwój zawodowy.
  • Comiesięczne świadczenia wellness.
  • Coroczny wyjazd firmowy finansowany przez firmę.
  • Codzienny lunch biurowy przez Uber Eats dla pracowników nowojorskiej centrali.
  • Dofinansowanie dojazdów dla pracowników nowojorskiej centrali.
  • Praca zdalna w piątki dla pracowników nowojorskiej centrali.
  • Spotkania przy drinkach po pracy i inne lokalne wydarzenia dla pracowników nowojorskiej centrali.
  • Możliwość otrzymania rocznej premii za wyniki.

Powiązane oferty pracy

Public Partnerships | PPL

Główny architekt danych Databricks i Azure

Public Partnerships | PPL
1001 – 5000 Pracownicy
Sponsor wizy H1BB2BUbezpieczenie zdrowotne
USStany Zjednoczone
162 500 $ – 214 000 $ / rok
ZdalniePełny etatLeadWymagany Język: angielskiInżynier danych
ApacheAzureChmuraPythonSparkSQLUnity

Kieruj projektowaniem zarządzanych platform analitycznych Databricks i Azure wspierających finansową obsługę programów Medicaid. Rozwijaj funkcje zarządzania danymi podstawowymi, uzgadniaj tożsamości uczestników i dostawców usług oraz dostarczaj zgodne z wymogami produkty danych w skali całego kraju.

Otwórz
Sony Interactive Entertainment

Starszy inżynier oprogramowania danych, Sony Interactive Entertainment (zdalnie, USA)

Sony Interactive Entertainment
Sponsor wizy H1BGrySprzęt komputerowyTelekomunikacja
USStany Zjednoczone
198 200 $ – 297 400 $ / rok
ZdalniePełny etatLeadWymagany Język: angielskiInżynier danych
ApacheAWSKafkaPythonScalaSparkSystemy rozproszone

Twórz platformy analityczne czasu rzeczywistego dla PlayStation. Kieruj rozproszoną architekturą danych, infrastrukturą strumieniową i narzędziami AI zwiększającymi efektywność pracy inżynierów.

Otwórz