EXL
EXL
EXL — консалтингова компанія та постачальник бізнес-послуг, яка допомагає організаціям використовувати дані, аналітику й технології для підвищення ефективності операцій і ухвалення кращих рішень. Її діяльність охоплює управління операціями, аналітику для ухвалення рішень і цифрову трансформацію, а досвід компанії охоплює підтримку клієнтів у сферах охорони здоров’я, страхування, фінансів і логістики. EXL поєднує аналіз даних із практичною бізнес-експертизою, розробляючи рішення з урахуванням цілей, операційної моделі та галузевого контексту кожної організації.

Технічний керівник Databricks в EXL — Ченнаї, гібридний формат

Керуйте розробкою lakehouse-рішень Databricks для платформ протидії фінансовим злочинам. Створюйте конвеєри Delta Lake та адмініструйте Unity Catalog у середовищах розробки, тестування й експлуатації.

Опис

  • Створюйте й підтримуйте робочі простори Databricks, кластери та пули обчислювальних ресурсів для середовищ розробки, тестування й експлуатації.
  • Налаштовуйте керування даними в Unity Catalog, контроль доступу, детальні дозволи та походження даних.
  • Оптимізуйте типи кластерів, автомасштабування та вузли з оплатою за використання або витіснювані вузли, щоб збалансувати вартість і продуктивність.
  • Організовуйте структуру робочих просторів і контроль доступу, керуйте секретами за допомогою Databricks Secrets, Azure Key Vault або AWS Secrets Manager.
  • Керуйте завданнями й робочими процесами Databricks, а також оркестрацією кількох завдань з урахуванням залежностей.
  • Проєктуйте таблиці Delta Lake із секціонуванням і Z-ordering, ущільнюйте файли за допомогою OPTIMIZE та VACUUM.
  • Організовуйте озера структурованих даних за рівнями Bronze, Silver і Gold відповідно до архітектури Medallion.
  • Розробляйте конвеєри Delta Live Tables із декларативним ETL/ELT і вбудованими вимогами до якості даних.
  • Опрацьовуйте зміни схем, версії таблиць, переміщення в часі та Change Data Feed для інкрементальної обробки.
  • Створюйте архітектурні шаблони lakehouse, що поєднують Delta Lake з Kafka, ADLS, S3 і GCS.
  • Створюйте конвеєри Databricks для платформ протидії фінансовим злочинам: AML, KYC, CRA, перевірка санкційних списків, моніторинг транзакцій, виявлення шахрайства та регуляторна звітність.

Вимоги

  • Ступінь бакалавра або магістра з інформатики, інформаційних технологій, інженерії даних або суміжної дисципліни.
  • Щонайменше 8 років досвіду в інженерії даних або програмній інженерії.
  • Щонайменше 3 роки практичного досвіду роботи з Databricks у промисловому середовищі.
  • Ґрунтовні знання інженерії великих даних, хмарних платформ даних і розподілених обчислень.
  • Поглиблений досвід роботи з Databricks Workspaces, Clusters, Jobs, Workflows і Repos.
  • Володіння Unity Catalog, зокрема налаштуванням metastore, керуванням каталогами, схемами й таблицями, контролем доступу та походженням даних.
  • Практичний досвід розробки й моніторингу конвеєрів Delta Live Tables, а також налаштування вимог до якості даних.
  • Глибоке розуміння внутрішньої будови Delta Lake, зокрема журналу транзакцій, гарантій ACID, компонування файлів і методів оптимізації.
  • Досвід роботи з Databricks SQL Warehouses, SQL Analytics і розробкою дашбордів.
  • Знання рушія Databricks Photon, безсерверних обчислень і оптимізації витрат.

Схожі вакансії

Digitide

Технічний архітектор

Digitide

Проєктуйте ІТ-архітектури та системи у гібридному форматі роботи в Бенгалуру, Індія.

Відкрити
Neuron

Провідний frontend-інженер, Angular

Neuron

Розвивайте frontend-архітектуру та створюйте рішення на Angular для вебу й мобільних пристроїв на платформі Neuron для опрацювання запитів за допомогою ШІ. Відповідайте за повторно використовувані UI-компоненти, інтеграції, продуктивність і наставництво інженерів.

Відкрити
Weekday

Старший керівник Full-Stack Java-розробки

Weekday

Керуйте інженерними командами, що створюють масштабовані сервіси на Java і Spring Boot та сучасні фронтенд-застосунки. Відповідайте за архітектуру, надійність, наставництво й випуск програмних продуктів для замовника.

Відкрити
Citi

Розробник мікросервісів Spring Boot — Пуна, гібридний формат

Citi

Розробка та підтримка застосунків Citi для фінансових послуг на основі мікросервісів Spring Boot. Роль передбачає підвищення безпеки застосунків, налагодження систем і консультування технологічних зацікавлених сторін.

Відкрити
AtkinsRéalis

Провідний інженер з електротехніки, КВПіА та автоматизації у сфері водопостачання і водовідведення

AtkinsRéalis

Керуйте проєктуванням електротехнічних систем для водоочисних споруд і насосних станцій в AtkinsRéalis. Координуйте роботу фахівців різних напрямів, дотримання стандартів, перевірку проєктів і розвиток команди інженерів-електриків.

Відкрити
Nokia

Провідний інженер-програміст, хмарні платформи

Nokia

Розвивайте хмарну платформу мережевої спостережуваності MantaRay NM від Nokia, працюючи з розподіленими системами, Kubernetes та автоматизацією CI/CD. Застосовуйте інструменти розробки з підтримкою ШІ й автоматизацію для вдосконалення процесу створення ПЗ.

Відкрити