EXL to firma konsultingowa i dostawca usług biznesowych, która pomaga organizacjom wykorzystywać dane, analitykę i technologie w celu usprawniania operacji oraz podejmowania lepszych decyzji. Jej działalność obejmuje zarządzanie operacyjne, analitykę wspierającą podejmowanie decyzji i transformację cyfrową, a doświadczenie firmy obejmuje współpracę z klientami z sektorów ochrony zdrowia, ubezpieczeń, finansów i logistyki. EXL łączy analizę danych z praktyczną wiedzą biznesową, tworząc rozwiązania dopasowane do celów, modelu operacyjnego i specyfiki branżowej każdej organizacji.
Starszy inżynier danych w EXL — praca zdalna w Stanach Zjednoczonych
Kieruj architekturą chmurowych platform danych o skali petabajtowej w EXL. Odpowiadaj za potoki danych, przetwarzanie strumieniowe, optymalizację analityki i rozwój zespołu inżynierów danych.
Stany Zjednoczone85 000 $ – 140 000 $ / rok
ZdalniePełny etatSeniorLeadWymagany Język: angielskiInżynier danychOpis
- Wyznaczaj architekturę i standardy skalowalnych, niezawodnych i bezpiecznych kompleksowych potoków danych
- Mentoruj inżynierów, przeprowadzaj przeglądy kodu i zarządzaj harmonogramami dostarczania produktów danych
- Przekładaj wymagania biznesowe i techniczne na gotowe do wdrożenia rozwiązania danych we współpracy z data scientistami, analitykami i interesariuszami
- Wspieraj data scientistów i inżynierów uczenia maszynowego w zakresie dostępu do danych, tworzenia modeli i zapewniania jakości danych
- Twórz i optymalizuj zadania o dużej przepustowości związane z pozyskiwaniem i transformacją danych za pomocą dbt Core i AWS Glue
- Twórz i utrzymuj modułowe, wielokrotnego użytku potoki z użyciem orkiestratorów, takich jak Dagster
- Zarządzaj przepływami danych w czasie rzeczywistym za pośrednictwem platform Confluent lub usług strumieniowych AWS, takich jak Kinesis
- Stosuj praktyki anonimizacji danych i spełniaj wymagania dotyczące bezpieczeństwa oraz prywatności
- Wdrażaj i utrzymuj Apache Iceberg na potrzeby ewolucji schematów i zarządzania danymi
- Poprawiaj wydajność zapytań i kontroluj koszty w Snowflake, Amazon Redshift i AWS Athena
- Dodawaj monitorowanie i obserwowalność Splunk, aby identyfikować wąskie gardła i rozwiązywać problemy produkcyjne
Wymagania
- Co najmniej 10 lat rosnącego, praktycznego doświadczenia w inżynierii danych, architekturze danych lub blisko związanej, kompleksowej roli w obszarze danych
- Dobra znajomość zasad inżynierii danych, wzorców ETL/ELT i zarządzania metadanymi
- Udokumentowane doświadczenie w tworzeniu i obsłudze infrastruktury o skali petabajtowej w środowiskach chmurowych
- Doświadczenie w branży ubezpieczeniowej jest mile widziane, ale nie jest wymagane
- Doświadczenie z usługami AWS, w tym S3, IAM i VPC
- Doświadczenie z Talend, dbt Core, Iceberg, AWS Glue Catalog, Snowflake, Redshift, Athena, Splunk, usługami strumieniowymi AWS i Git
- Bardzo dobra znajomość SQL, PySpark i Pythona
- Praktyczna znajomość podstaw DataOps i DevOps
Benefity
- Roczna premia
- Informacje o świadczeniach są dostępne na stronie https://www.exlservice.com/us-careers-and-benefits
- Praca zdalna / praca z domu