Allata
Allata
Allata — міжнародна консалтингова компанія, яка допомагає організаціям перетворювати цифрову стратегію на практичні покращення бізнесу. Її команди працюють у сферах стратегії, клієнтського досвіду, хмарних рішень і технологій, даних та штучного інтелекту, допомагаючи клієнтам модернізувати процеси, персоналізувати взаємодію та підвищувати операційну ефективність. Allata працює з компаніями в автомобільній галузі, охороні здоров’я, логістиці, фінансових послугах і високих технологіях, спираючись на досвід колишніх керівників ІТ-підрозділів і консультантів для реалізації складних цифрових ініціатив.

Керівник платформи даних Databricks (віддалено, Техас)

Керуйте архітектурою та впровадженням керованих платформ Lakehouse і корпоративних сховищ даних для Allata. Розвивайте конвеєри даних, безпеку, масштабованість і створення продуктів даних.

Опис

  • Визначайте архітектуру, обирайте технології, еталонні шаблони та схеми інтеграції для платформ Lakehouse і корпоративних сховищ даних.
  • Створюйте концептуальні, логічні та фізичні моделі багатокористувацьких і галузевих продуктів даних.
  • Стандартизуйте рівні даних для завантаження, сирого зберігання, опрацювання та надання.
  • Запроваджуйте практики керування метаданими, каталогами, походженням даних, контрактами даних і класифікацією.
  • Визначайте засоби безпеки та відповідності вимогам щодо доступу, маскування, шифрування, сегментації мережі й аудиту.
  • Плануйте масштабованість платформи, високу доступність, аварійне відновлення, потужності та керування витратами.
  • Керуйте вибором та інтеграцією Databricks, Delta Lake, Delta Live Tables, Fivetran, Azure Data Factory або Data Fabric, засобів оркестрації та моніторингу.
  • Встановлюйте та забезпечуйте дотримання практик CI/CD для ресурсів даних, зокрема тестів, автоматизованих випусків і планів відкату.
  • Визначайте підходи до пакетного й потокового завантаження, ущільнення, секціонування та зберігання.
  • Встановлюйте стандарти спостережуваності для метрик, SLA, інформаційних панелей, журналів, трасувань і сповіщень.
  • Забезпечуйте технічне керівництво та наставництво для команд Data Engineering.
  • Перевіряйте архітектуру та код критично важливих компонентів.
  • Співпрацюйте з власниками продуктів даних і фахівцями з безпеки, інфраструктури, BI та ML, перетворюючи вимоги на рішення й дорожні карти.
  • Створюйте, тестуйте та розгортайте модулі обробки за допомогою Spark, PySpark або Scala, Spark SQL і збережених процедур.
  • Розробляйте й оптимізуйте конвеєри даних на Databricks і платформах баз даних.
  • Застосовуйте практики DevOps, інфраструктуру як код, CI/CD, автоматизоване тестування та контроль версій.
  • Розв'язуйте складні проблеми якості, продуктивності й доступності даних та забезпечуйте постійне вдосконалення.

Вимоги

  • Досвід роботи архітектором або технічним керівником корпоративних платформ даних.
  • Практичні знання технологій Databricks, зокрема Delta Lake, Unity Catalog, Delta Live Tables, Auto Loader і Structured Streaming.
  • Впевнені навички роботи зі Spark, PySpark та/або Scala, Spark SQL і оптимізації розподілених завдань.
  • Досвід проєктування сховищ даних і Lakehouse.
  • Практичне знання шаблонів Medallion, Lambda і Kappa.
  • Досвід інтеграції SaaS, ETL або інструментів-конекторів, таких як Fivetran.
  • Досвід роботи з інструментами оркестрації, такими як Airflow, Azure Data Factory і Data Fabric.
  • Досвід роботи з реляційними та гібридними базами даних, зокрема MS SQL Server, PostgreSQL, Oracle, Azure SQL і AWS RDS/Aurora або їхніми аналогами.
  • Впевнене володіння CI/CD конвеєрів даних за допомогою Azure DevOps, GitHub Actions, Jenkins або подібних інструментів.
  • Досвід пакування та розгортання артефактів, наприклад файлів .whl і контейнерів.
  • Досвід пакетної та потокової обробки, ущільнення файлів, секціонування й налаштування зберігання.
  • Розуміння хмарної безпеки, IAM/RBAC, шифрування, концепцій VPC/VNet і хмарних мереж.
  • Знайомство з інструментами спостережуваності й моніторингу, такими як Prometheus, Grafana, Datadog або вбудовані хмарні сервіси.
  • Досвід автоматизації конвеєрів CI/CD і розробки на основі trunk буде перевагою.
  • Просунуті навички PySpark будуть перевагою.
  • Просунуті навички оптимізації та оркестрації робочих процесів Spark будуть перевагою.
  • Сертифікати з Databricks, хмарної архітектури або даних будуть перевагою.
  • Уміння виявляти, діагностувати й розв'язувати складні проблеми з даними.
  • Навички співпраці та комунікації.
  • Допитливість і відкритість до нових інструментів, технологій і методів.

Переваги

  • Повна зайнятість.
  • Рівні можливості та інклюзивне робоче середовище.
  • Відданість принципам різноманіття.

Схожі вакансії

The Athletic

Старший менеджер з аналітики даних

The Athletic

Очолюйте аналітику зростання продукту в The Athletic, спортивному медіа. Керуйте командою аналітиків і використовуйте експерименти для ухвалення рішень щодо підписок і продукту.

Відкрити
Lunar Solar Group

Фахівець із вимірювання маркетингу та аналізу даних (дистанційно, США)

Lunar Solar Group

Розробляйте атрибуцію, оцінювання інкрементальності та моделі медіаміксу для Lunar Solar Group — консалтингової компанії з розвитку бізнесу та агенції цифрового маркетингу. Перетворюйте аналітику на практичні рекомендації щодо розподілу клієнтських бюджетів.

Відкрити
Airbnb

Старший фахівець із даних у дослідженнях People Analytics

Airbnb

Керуйте дослідженнями з аналітики персоналу в Airbnb, застосовуючи причинно-наслідковий аналіз і статистичне моделювання для ухвалення рішень щодо робочої сили, винагород, найму й утримання працівників. Співпрацюйте із зацікавленими сторонами над аналітикою та звітністю з чутливих питань.

Відкрити
The Cigna Group

Старший керівник зі створення даних, віддалено (США)

The Cigna Group

Створюйте повторно використовувані продукти даних Silver і Gold для медичних сервісів Cigna за допомогою Databricks і керованих MVP- та CI/CD-конвеєрів. Перетворюйте потреби бізнесу на готові до експлуатації рішення та встановлюйте стандарти для Data Operations.

Відкрити
Clear Street

Старший фахівець із аналізу даних у сфері зростання

Clear Street

Підвищуйте якість оцінювання, надійність і безпеку ІІ-помічника Clear Street. Ця роль підтримує хмарну брокерську й торговельну платформу для досвідчених інвесторів.

Відкрити