Pinterest — це візуальна платформа для пошуку ідей, де люди знаходять натхнення, зберігають ідеї та впорядковують їх за інтересами, проєктами й покупками. Платформа поєднує персоналізовані рекомендації та візуальний пошук за такими темами, як дизайн інтер’єру, мода, рецепти й події, а також допомагає авторам і роздрібним продавцям знаходити аудиторію за допомогою інструментів для електронної торгівлі та реклами.
Старший штатний інженер-програміст, платформа ШІ — гібридний формат, Пало-Альто
Керуйте стратегією, архітектурою та впровадженням платформи Pinterest для оцінювання ШІ й машинного навчання. Допомагайте формувати надійні практики оцінювання генеративних ШІ-продуктів у всій компанії.
Опис
- Виявляйте можливості модернізації та розширюйте дорожню карту загальнокорпоративної системи оцінювання, забезпечуючи технічне лідерство
- Визначайте технічний напрям для різних функцій, узгоджуйте команди-партнери та підвищуйте впровадження спільних можливостей оцінювання
- Приймайте довгострокові архітектурні рішення, що зміцнюють користувацький досвід і надійність платформи Pinterest для оцінювання ШІ та машинного навчання
- Розробляйте методи й стандарти оцінювання, що поєднують автоматизовані метрики, експертну перевірку, відгуки людей, безпеку та бізнес-результати
- Керуйте складними ініціативами між командами, працюйте з технічними компромісами й ризиками та забезпечуйте вимірюваний результат
- Розвивайте платформу Pinterest для оцінювання ШІ та машинного навчання в єдину надійну систему, яку використовують у всій компанії
- Співпрацюйте з командами розробки, досліджень, продукту та безпеки, щоб підвищувати якість, покращувати рішення щодо запуску й зміцнювати впевненість у продуктах на основі ШІ
Вимоги
- Щонайменше 3 роки практичного досвіду проєктування та експлуатації систем оцінювання для генеративного ШІ та складних систем машинного навчання
- Досвід створення бенчмарків і еталонних наборів даних, застосування автоматизованих метрик та оцінювання людьми, використання оцінювання на основі моделей і аналізу збоїв
- Впевнене володіння Python
- Робоче знання принципів розподілених систем
- Здатність ефективно ітераційно працювати з інструментами ШІ під час написання коду та проєктування систем
- Глибокі знання бібліотек і фреймворків для оцінювання генеративного ШІ та рекомендаційних систем, зокрема AutoEvals, OpenEvals і Ragas
- Щонайменше 5 років досвіду розробки масштабованих платформ для розподілених експериментів, версіювання даних і моделей, оркестрації, спостережуваності, керування релізами та моніторингу в продуктивному середовищі
- Зважене розуміння ризиків генеративного ШІ, зокрема стійкості, упередженості, приватності, безпеки та обмежень автоматизованих сигналів оцінювання
- Ступінь бакалавра в галузі комп’ютерних наук, інженерії або суміжній дисципліні чи еквівалентний досвід
Переваги
- Право на отримання акцій
- Гнучка робоча модель PinFlex
- Очна співпраця один або два рази на квартал
- Роботодавець, який дотримується принципу рівних можливостей
- Підтримка у разі потреби в медичних або релігійних умовах під час процесу подання заявки