EXL
EXL
EXL е компания за бизнес консултиране и услуги, която помага на организациите да използват данни, анализи и технологии, за да подобрят операциите си и да вземат по-добри решения. Дейността ѝ включва управление на операции, аналитика за вземане на решения и дигитална трансформация, като компанията има опит в подкрепата на клиенти в здравеопазването, застраховането, финансите и логистиката. EXL съчетава науката за данните с практически бизнес експертни познания, за да разработва решения, съобразени с целите, оперативния модел и отрасловия контекст на всяка организация.

Технически ръководител на Databricks в EXL — Ченай, хибридно

Ръководете lakehouse инженерството за платформи за противодействие на финансови престъпления в Databricks. Изграждайте потоци от данни с Delta Lake и управлявайте Unity Catalog в среда за разработка, тестване и продукция.

Описание

  • Изграждайте и поддържайте работни пространства, клъстери и изчислителни пулове в Databricks за среда за разработка, тестване и продукция.
  • Настройвайте управлението на Unity Catalog, контрола на достъпа, детайлните разрешения и проследяването на произхода на данните.
  • Настройвайте типовете клъстери, автоматичното мащабиране и spot или прекъсваемите възли, за да балансирате разходите и производителността.
  • Създавайте структура на работните пространства, контрол на достъпа и управление на тайни чрез Databricks Secrets, Azure Key Vault или AWS Secrets Manager.
  • Управлявайте заданията и работните потоци в Databricks, както и оркестрацията на множество задачи, включително зависимостите между тях.
  • Проектирайте таблици в Delta Lake с разделяне на дялове и Z-ordering и уплътнявайте файловете чрез OPTIMIZE и VACUUM.
  • Организирайте структурираните езера от данни в слоеве Bronze, Silver и Gold чрез архитектурата Medallion.
  • Разработвайте потоци Delta Live Tables с декларативен ETL/ELT и вградени правила за качество на данните.
  • Обработвайте промени в схемите, версии на таблици, time travel и Change Data Feed за инкрементална обработка.
  • Създавайте lakehouse модели, които свързват Delta Lake с Kafka, ADLS, S3 и GCS.
  • Изграждайте потоци в Databricks за платформи за противодействие на финансови престъпления, обхващащи AML, KYC, CRA, проверка за санкции, наблюдение на транзакции, откриване на измами и регулаторно отчитане.

Изисквания

  • Бакалавърска или магистърска степен по информатика, информационни технологии, инженерство на данни или сродна специалност.
  • Най-малко 8 години опит в инженерството на данни или софтуерното инженерство.
  • Най-малко 3 години практически опит с Databricks в продукционна среда.
  • Солидни познания по инженерство на големи данни, облачни платформи за данни и разпределени изчисления.
  • Задълбочен практически опит с Databricks Workspaces, Clusters, Jobs, Workflows и Repos.
  • Отлично познаване на Unity Catalog, включително настройка на metastore, управление на каталози, схеми и таблици, контрол на достъпа и проследяване на произхода на данните.
  • Практически опит в разработването и наблюдението на потоци Delta Live Tables и задаването на очаквания за тях.
  • Задълбочено разбиране на вътрешното устройство на Delta Lake, включително транзакционния журнал, ACID гаранциите, файловото разположение и методите за оптимизация.
  • Опит с Databricks SQL Warehouses, SQL Analytics и разработване на табла.
  • Познания за двигателя Databricks Photon, безсървърните изчисления и оптимизирането на разходите.

Свързани работни места

Digitide

Технически архитект

Digitide

Проектирайте ИТ архитектури и системи в хибридна роля в Бенгалуру, Индия.

Отвори
Neuron

Старши инженер по фронтенд разработка с Angular

Neuron

Ръководи архитектурата на фронтенда и създава Angular решения за уеб и мобилни устройства в платформата на Neuron за разрешаване на заявки с изкуствен интелект. Отговаря за компоненти за многократна употреба, интеграции и производителност и наставлява инженери.

Отвори
Weekday

Старши мениджър на full-stack разработка с Java

Weekday

Ръководете инженерни екипи, които изграждат мащабируеми услуги с Java и Spring Boot и модерни фронтенд приложения. Насочвайте архитектурата, надеждността, менторството и доставката за клиент в сферата на софтуерната разработка.

Отвори
Citi

Разработчик на микросървиси със Spring Boot – Пуна, хибридно

Citi

Разработвайте и поддържайте приложения за финансови услуги на Citi, изградени с микросървиси със Spring Boot. Работата включва подобряване на сигурността на приложенията, отстраняване на грешки в системи и консултиране на заинтересованите страни в областта на технологиите.

Отвори
AtkinsRéalis

Главен EICA инженер по водоснабдяване и отпадъчни води

AtkinsRéalis

Ръководи проектирането на електротехнически решения за пречиствателни станции за вода и отпадъчни води и помпени станции в AtkinsRéalis. Напътства мултидисциплинарното изпълнение на проекти, спазването на стандарти, проверките на проектите и развитието на електротехническите екипи.

Отвори
Nokia

Старши софтуерен инженер за cloud-native платформи

Nokia

Разработвайте cloud-native платформата за мрежова наблюдаемост MantaRay NM на Nokia и работете с разпределени системи, Kubernetes и CI/CD автоматизация. Използвайте инструменти за разработка с помощта на изкуствен интелект и автоматизация, за да подобрявате процеса на създаване на софтуер.

Отвори