State Street
State Street
State Street — глобальная компания, предоставляющая финансовые услуги институциональным инвесторам через решения в области управления инвестициями и инвестиционного обслуживания. В число её предложений входят управление активами, кастодиальные услуги и инвестиционные исследования, основанные на экспертизе в сфере финансов, финтеха и банковского дела. Компания помогает клиентам управлять сложными инвестиционными операциями с помощью данных, аналитических выводов и операционных возможностей, направленных на повышение эффективности и поддержку принятия финансовых решений.

Старший инженер данных Databricks, вице-президент — State Street (Куинси, гибридный формат)

Создавайте конвейеры данных на Azure и Databricks для финансовой платформы State Street. Разрабатывайте ETL-процессы, проверки качества данных и высокопроизводительные решения в гибкой команде.

Описание

  • Создавайте и тестируйте сквозные облачные конвейеры данных для потоковой, событийной и пакетной загрузки с использованием Azure и Cosmos DB.
  • Создавайте ETL-процессы для загрузки, преобразования и размещения данных в озёрах данных.
  • Применяйте в инженерной работе концепции Databricks и хранилищ данных.
  • Создавайте настраиваемые платформы и библиотеки, рассчитанные на высокую пропускную способность.
  • Содействуйте изменениям, сотрудничая с коллегами, влияя на заинтересованные стороны и представляя доказательства концепции.
  • Участвуйте во всех этапах жизненного цикла разработки ПО: от проектирования и написания кода до интеграционного тестирования, развёртывания и документирования.
  • Сотрудничайте с коллегами в гибкой проектной команде.
  • Следуйте утверждённым инженерным практикам и стандартам написания кода.
  • Отслеживайте работу конвейеров данных и устраняйте возникающие проблемы.
  • Добавляйте проверки качества данных и валидацию для обеспечения точности.
  • Анализируйте данные и исследуйте наборы данных.
  • Продолжайте развивать профессиональные навыки.

Требования

  • Степень бакалавра в области информатики, информационных технологий или смежной области.
  • Не менее 10 лет опыта работы с конвейерами больших данных.
  • Не менее 5 лет практического опыта работы с Databricks.
  • Не менее 5 лет опыта разработки на облачных платформах, включая Azure, Azure DevOps, Kubernetes и Docker.
  • Опыт работы с микросервисной архитектурой и облачными вычислениями; предпочтителен Azure.
  • Практическое владение Databricks, Delta Lake и Apache Spark.
  • Практический опыт разработки с Databricks SQL и Scala.
  • Глубокое понимание ресурсов Databricks, включая кластеры и задания.
  • Значительный практический опыт устранения неполадок в конвейерах DevOps, включая ADO и Harness.
  • Опыт работы с системами контроля версий, например Git.
  • Опыт работы с полуструктурированными форматами, такими как Avro, JSON и XML.
  • Базовое знакомство со скриптами оболочки, UNIX, TOAD и SQL Developer.
  • Высокий уровень профессиональной устной и письменной коммуникации.
  • Опыт работы в сфере финансовых услуг.
  • Опыт работы по гибким методологиям разработки.
  • Опыт работы со Snowflake будет преимуществом.

Преимущества

  • Пенсионный накопительный план 401(k) с взносами работодателя.
  • Варианты страхования: базовое страхование жизни, медицинское и стоматологическое страхование, страхование зрения, долгосрочной нетрудоспособности и другие дополнительные виды покрытия.
  • Оплачиваемый отпуск, включая отпускные дни, больничный, краткосрочную нетрудоспособность и отпуск по семейным обстоятельствам.
  • Программа помощи сотрудникам.
  • Возможность получать ежегодные премии по результатам работы.
  • Возможность участия в отдельных налоговых льготных накопительных планах.
  • Инклюзивные возможности для профессионального развития.
  • Поддержка гибкого баланса между работой и личной жизнью.
  • Оплачиваемые дни для волонтёрской деятельности.
  • Сети сотрудников.

Похожие вакансии

Cardinal Health

Руководитель инженерии данных в Cardinal Health

Cardinal Health

Руководите командами корпоративной трансформации данных в Cardinal Health, отвечая за платформы Google Cloud, аналитику и операции AI/ML. Направляйте поставку решений, развитие платформ и профессиональный рост сотрудников.

Открыть
Novartis

Novartis: ведущий инженер по данным, ассоциированный директор

Novartis

Руководите инженерией данных, наблюдаемостью и корпоративными контрактами данных в Novartis. Создавайте надежную и соответствующую требованиям основу данных для продуктов на базе ИИ и улучшения здоровья пациентов.

Открыть
EXL

Руководитель направления инженерии данных в маркетинге — EXL

EXL

Руководите архитектурой и внедрением платформы маркетинговых данных EXL. Курируйте решения на Azure и Databricks, Customer 360 и MDM, а также команды инженеров данных.

Открыть
State Street

Старший инженер данных Databricks

State Street

Создавайте конвейеры данных на Azure и Databricks для платформы финансовых услуг State Street. Разрабатывайте ETL-процессы, озёра данных и масштабируемые решения в гибкой команде.

Открыть
MSD

MSD — ассоциированный директор по инженерии данных и аналитике

MSD

Руководите развитием масштабируемых решений для инженерии данных и аналитики в биофармацевтическом производстве, улучшая доступ к данным и внедрение аналитики. Помогайте научным и производственным командам в регулируемой среде принимать более обоснованные решения.

Открыть