A EXL é uma empresa de consultoria e serviços empresariais que ajuda organizações a utilizar dados, análises e tecnologia para melhorar suas operações e tomar decisões mais assertivas. Seu trabalho inclui gestão de operações, análise para tomada de decisões e transformação digital, com experiência nos setores de saúde, seguros, finanças e logística. A EXL combina ciência de dados com experiência prática em negócios para desenvolver soluções adaptadas aos objetivos, ao modelo operacional e ao contexto de cada organização.
Engenheiro(a) de Dados Sênior na EXL - Trabalho remoto nos Estados Unidos
Lidere a arquitetura de plataformas de dados nativas em nuvem e em escala de petabytes na EXL. Assuma a responsabilidade por pipelines de dados, streaming, otimização analítica e liderança em engenharia de dados.
Estados Unidos$ 85.000 – $ 140.000 / ano
RemotoTempo integralSêniorLíderIdioma Obrigatório: inglêsEngenheiro de dadosDescrição
- Definir a direção arquitetônica e os padrões para pipelines de dados completos, escaláveis, confiáveis e seguros
- Mentorar engenheiros, revisar código e gerenciar cronogramas de entrega de produtos de dados
- Traduzir requisitos de negócio e técnicos em soluções de dados prontas para produção com Cientistas de Dados, Analistas e partes interessadas
- Dar suporte a Cientistas de Dados e Engenheiros de ML com acesso a dados, desenvolvimento de modelos e garantia da qualidade dos dados
- Criar e otimizar tarefas de ingestão e transformação de alto volume com dbt Core e AWS Glue
- Criar e manter pipelines modulares e reutilizáveis com orquestradores como o Dagster
- Gerenciar fluxos de dados em tempo real por meio das plataformas Confluent ou de serviços de streaming da AWS, como o Kinesis
- Aplicar práticas de anonimização de dados e atender aos requisitos de segurança e privacidade
- Implementar e manter o Apache Iceberg para evolução de esquemas e gerenciamento de dados
- Melhorar o desempenho de consultas e controlar custos no Snowflake, Amazon Redshift e AWS Athena
- Adicionar monitoramento e observabilidade com o Splunk para identificar gargalos e resolver problemas de produção
Requisitos
- Pelo menos 10 anos de experiência progressiva e prática em Engenharia de Dados, Arquitetura de Dados ou uma função de dados full-stack estreitamente relacionada
- Forte conhecimento dos princípios de engenharia de dados, padrões ETL/ELT e gerenciamento de metadados
- Experiência comprovada na criação e operação de infraestrutura em escala de petabytes em ambientes nativos em nuvem
- Experiência no setor de seguros é preferencial, mas não obrigatória
- Experiência com serviços da AWS, incluindo S3, IAM e VPC
- Experiência com Talend, dbt Core, Iceberg, AWS Glue Catalog, Snowflake, Redshift, Athena, Splunk, serviços de streaming da AWS e Git
- Sólidos conhecimentos de SQL, PySpark e Python
- Conhecimento prático dos fundamentos de DataOps e DevOps
Benefícios
- Bônus anual
- Informações sobre benefícios disponíveis em https://www.exlservice.com/us-careers-and-benefits
- Trabalho remoto / trabalho em casa