Reality Defender (YC W22)
Reality Defender (YC W22)
Reality Defender développe des outils basés sur l’intelligence artificielle pour aider les entreprises, les gouvernements et les plateformes numériques à identifier les médias synthétiques. Sa plateforme de détection analyse l’audio, la vidéo, les images et le texte afin d’y repérer des signes de génération par IA. Elle accompagne les équipes des médias, de la finance et des administrations dans la gestion de risques tels que la fraude et la désinformation. Son approche multimodèle évalue le contenu de manière probabiliste, sans dépendre de filigranes ni d’une authentification préalable.

Ingénieur principal en plateforme de données

Pilotez la plateforme de données Databricks qui soutient les recherches de Reality Defender sur la détection des deepfakes. Créez des jeux de données multimodaux reproductibles et des pipelines évolutifs de génération de données synthétiques.

Description

  • Pilotez l’ensemble de la plateforme de données dédiée à la recherche en IA, de l’ingestion continue et du prétraitement à la gouvernance et à l’export de grands volumes de données d’image, de vidéo, audio et textuelles.
  • Développez et faites évoluer le lakehouse Databricks et la pile de traitement distribué.
  • Orientez les choix d’architecture et les décisions entre développement interne et achat à mesure que les volumes de données augmentent.
  • Développez une infrastructure réutilisable pour générer des données synthétiques en interne dans plusieurs modalités.
  • Mettez en place le versionnage des jeux de données, leur traçabilité, les métadonnées, les contrôles qualité et des partitions cohérentes pour l’entraînement et l’évaluation.
  • Prenez en charge la fiabilité et l’observabilité des pipelines ainsi que les coûts de traitement par jeu de données.
  • Travaillez avec les chercheurs en apprentissage automatique pour créer des outils en libre-service qui accélèrent le développement des modèles.
  • Accompagnez les ingénieurs et renforcez les revues de code, les tests, la documentation et les procédures opérationnelles.
  • Coordonnez-vous avec les équipes Sécurité et Conformité sur le traitement des données, les licences et les contrôles d’accès.
  • Définissez la feuille de route à long terme de la plateforme de données avec les responsables de l’ingénierie et de la recherche.
  • Vous reportez au directeur des données.
  • Au cours des 12 premiers mois, vous piloterez une plateforme en libre-service mature, développerez la génération de données synthétiques, livrerez des jeux de données d’évaluation reproductibles et mènerez des initiatives majeures de la feuille de route.

Exigences

  • Au moins 8 ans d’expérience dans la création de plateformes ou d’infrastructures de données, avec notamment des responsabilités de niveau staff ou lead sur des pipelines de production générant, ingérant ou fournissant de grands volumes de données.
  • Solide expérience pratique des outils de traitement distribué tels que Spark ou Ray et des plateformes lakehouse, idéalement Databricks, avec un stockage objet dans le cloud tel que S3, GCS ou Azure Blob.
  • Expérience en production avec Databricks, Unity Catalog, Delta Lake et Spark sur AWS, notamment en optimisation des performances, gestion des accès et résolution des problèmes opérationnels.
  • Expérience de la gestion de grands volumes de médias non structurés, comme la vidéo, l’audio ou les images, notamment des fichiers volumineux, le décodage, le transcodage et les métadonnées à grande échelle.
  • Expérience avérée dans la production de jeux de données ML reproductibles grâce au versionnage, à la traçabilité, à la validation de la qualité des données et à l’orchestration avec des outils tels qu’Airflow, Dagster ou Databricks Workflows.
  • Maîtrise de Python et SQL.
  • Bon jugement et capacité à prendre en charge de bout en bout des défis de plateforme ambigus au sein d’une équipe réduite.
  • Expérience de l’automatisation des infrastructures et des déploiements avec Terraform et CI/CD, notamment du stockage AWS, d’IAM, du calcul, des ressources Databricks et des environnements de traitement distribué.
  • Une expérience du développement de pipelines de génération de données synthétiques ou de l’exécution de modèles génératifs à grande échelle est un plus.
  • Une expérience de l’accompagnement d’équipes de recherche en ML pour les données d’entraînement et d’évaluation, notamment pour des modèles multimodaux, est un plus.
  • Une expérience dans la sécurité, la fraude, la confiance et la sûreté, un autre domaine adversarial ou une startup de série A ou B est un plus.
  • La candidature demande une autorisation de travail aux États-Unis.
  • Disponibilité pour déménager si vous ne résidez pas actuellement à New York ou à proximité, selon les modalités de travail.

Avantages

  • Les cotisations d’assurance maladie des employés sont entièrement prises en charge, avec une prise en charge partielle possible pour les personnes à charge.
  • Les cotisations des assurances dentaire et optique des employés et des personnes à leur charge sont entièrement prises en charge.
  • Les cotisations des assurances invalidité de courte et longue durée et de l’assurance vie des employés sont entièrement prises en charge.
  • Comptes de dépenses flexibles et comptes d’épargne santé, ainsi qu’un plan 401(k).
  • Rémunération en actions.
  • 20 jours de congés payés par an.
  • 12 semaines de congé parental.
  • Budget consacré à la formation et au développement.
  • Avantages mensuels liés au bien-être.
  • Séminaire annuel de l’entreprise hors site.
  • Déjeuner quotidien au bureau via Uber Eats pour les employés du siège de New York.
  • Avantages liés aux transports pour les employés du siège de New York.
  • Vendredis en télétravail pour les employés du siège de New York.
  • Apéritifs et autres événements locaux pour les employés du siège de New York.
  • Possibilité de bénéficier d’une prime annuelle liée aux performances.

Offres similaires

Public Partnerships | PPL

Architecte principal des données, Databricks et Azure

Public Partnerships | PPL
1 001 – 5 000 Employés
Sponsor de visa H1BAssurance santéB2B

Pilotez la conception de plateformes analytiques gouvernées sur Databricks et Azure pour des services de gestion financière de Medicaid. Développez des capacités de données de référence, résolvez les identités des participants et des prestataires, et fournissez des produits de données conformes à l’échelle nationale.

Ouvrir
L3Harris Technologies

Architecte en chef des données, Palantir

L3Harris Technologies

Pilotez l’ontologie, l’intégration et la gouvernance du programme d’entreprise de données et d’IA de L3Harris Technologies sur Palantir. Concevez une architecture de données unifiée couvrant environ 100 systèmes existants.

Ouvrir
Sony Interactive Entertainment

Ingénieur logiciel de données principal, Sony Interactive Entertainment (télétravail, États-Unis)

Sony Interactive Entertainment

Créez les plateformes d’analyse en temps réel qui font fonctionner PlayStation. Dirigez l’architecture des données distribuées, l’infrastructure de streaming et les outils d’IA qui améliorent la productivité des équipes d’ingénierie.

Ouvrir
Robots & Pencils

Architecte principal des données (télétravail au Canada)

Robots & Pencils

Définissez l’orientation de l’architecture des données pour les systèmes d’IA d’entreprise chez Robots & Pencils et concevez des plateformes évolutives et gouvernées. Conseillez les clients et accompagnez des équipes techniques expérimentées.

Ouvrir