Capital One — компанія у сфері фінансових послуг і фінтеху, що пропонує кредитні картки, автокредити, банківські продукти та ощадні рішення. Її робота поєднує фінансову експертизу з технологіями й цифровими інструментами, щоб покращувати способи управління коштами для клієнтів. Компанія зосереджується на створенні рішень, орієнтованих на клієнтів, у різноманітному та інклюзивному робочому середовищі.
Інженер з даних — Capital One (Нью-Йорк, робота в офісі)
Керуйте кросхмарною міграцією для команди Travel Data у Capital One. Створюйте конвеєри на Python, Spark і Databricks для персоналізованих туристичних рішень.
Опис
- Співпрацювати з Agile-командами під час проєктування, розроблення, тестування, упровадження та підтримки технічних рішень
- Керувати розробниками, аналітиками даних і фахівцями з даних у сферах машинного навчання, розподілених мікросервісів, lakehouse-архітектури та повностекових систем
- Працювати з Python, Spark, реляційними та NoSQL-базами даних, а також хмарними сховищами, такими як Databricks і Snowflake
- Відстежувати тенденції в інженерії даних, оцінювати нові технології, долучатися до технологічних спільнот і наставляти фахівців з даних
- Працювати з продакт-менеджерами та інженерами програмного забезпечення над створенням хмарних можливостей для роботи з даними
- Самостійно проєктувати, створювати й постачати хмарні застосунки та рішення для роботи з даними
- Розробляти й застосовувати інженерні шаблони, що підвищують якість, супроводжуваність і повторне використання коду
- Пояснювати технічні концепції та результати роботи з даними внутрішнім і зовнішнім зацікавленим сторонам
- Створювати масштабовані, відмовостійкі та операційно ефективні конвеєри й платформи даних
- Застосовувати практики безпеки даних, зокрема шифрування та детальне керування доступом
- Відповідати за важливі компоненти масштабної кросхмарної міграції для команди Travel Data
- Об’єднувати дані з кількох хмар у централізованому озері даних за допомогою Python, Spark і Databricks
- Підтримувати персоналізовані рекомендації в реальному часі, цільові туристичні пропозиції та інтелектуальні переваги для користувачів
Вимоги
- Ступінь бакалавра або вище в галузі комп’ютерних наук чи суміжній кількісній дисципліні
- Щонайменше чотири роки досвіду розроблення застосунків, не враховуючи стажування
- Щонайменше два роки досвіду роботи з розподіленими даними
- Щонайменше два роки досвіду роботи з SQL
- Щонайменше два роки досвіду роботи з Python, Java або Scala
- Щонайменше два роки досвіду проєктування та розроблення конвеєрів даних
- Щонайменше один рік досвіду моделювання даних і проєктування наскрізних рішень із реляційними та нереляційними базами даних
- Нові кандидати не мають права на підтримку роботодавця щодо імміграції або отримання дозволу на роботу
- Бажано сім або більше років досвіду розроблення застосунків
- Бажано чотири або більше років досвіду проєктування, розгортання та експлуатації робочих навантажень у публічній хмарі
- Бажано чотири або більше років досвіду створення або підтримки розподілених робочих навантажень для оброблення даних чи обчислень із використанням EMR, Spark, Glue або Databricks
- Бажано чотири або більше років досвіду проєктування, упровадження та експлуатації конвеєрів даних у реальному часі або потокових конвеєрів
- Бажано два або більше років досвіду використання інструментів спостережуваності даних або оркестрації, таких як Monte Carlo, Splunk, Airflow або Dagster
- Бажано чотири або більше років досвіду роботи з неструктурованими або напівструктурованими даними в NoSQL-базах даних
- Бажано чотири або більше років досвіду проєктування та підтримки рішень для сховищ даних
- Бажано два або більше років роботи в Agile-середовищі розроблення
- Бажано два або більше років досвіду розроблення повторно використовуваних продуктів даних, орієнтованих на користувачів
Переваги
- Компенсація за результатами роботи може включати грошові премії та/або довгострокові стимули
- Комплексний конкурентоспроможний пакет медичних, фінансових та інших переваг, розроблений для підтримки загального добробуту
- Для кандидатів з інвалідністю доступні розумні пристосування