E
A Experian trabalha com marcas reconhecidas em experiência digital, tecnologia e transformação empresarial. Seu trabalho combina conhecimento do cliente, estratégia de produto, soluções tecnológicas ágeis, inteligência artificial, arquitetura em nuvem e gerenciamento de projetos para ajudar as organizações a melhorar a experiência dos clientes e tornar as operações mais eficientes. Seu amplo foco em tecnologia e consultoria pode ser atraente para profissionais interessados em funções relacionadas à transformação digital, marketing, logística e outros serviços empresariais.
Engenheiro(a) Sênior de Dados na Experian — Trabalho Remoto no Brasil
Faça parte da equipe sênior de engenharia de dados da Experian para evoluir uma plataforma AWS em escala de petabytes. Desenvolva pipelines resilientes e recursos de marketing orientados por dados com Spark, linguagens JVM e Python.
Descrição
- Projetar, desenvolver e aprimorar a plataforma de dados AWS da Experian em escala de petabytes
- Desenvolver e otimizar pipelines escaláveis com linguagens JVM, Spark, Python e serviços nativos da nuvem
- Entregar processamento de dados eficiente, resiliente e pronto para produção para análises e produtos downstream
- Exercer liderança técnica em nível principal por meio de mentoria e revisões rigorosas de código
- Promover padrões de engenharia e ajudar a avançar a maturidade de engenharia da organização
- Definir arquiteturas e projetos técnicos com arquitetos, responsáveis por produto e líderes de engenharia
- Planejar e entregar iniciativas complexas em equipes ágeis organizadas por fluxos de valor
- Estabelecer a prontidão operacional por meio de padrões de codificação, testes, monitoramento e práticas de release
- Apoiar releases em produção e ajudar a manter a confiabilidade da plataforma
- Avaliar e adotar tecnologias, incluindo integrações com GraphQL, bancos de dados vetoriais e técnicas de IA/LLM
Requisitos
- Experiência em nível especialista em engenharia de software e dados para plataformas de grande escala
- Experiência profunda na criação de sistemas em escala de petabytes com linguagens baseadas em Java, como Scala, e Apache Spark
- Conhecimento avançado dos serviços de dados da AWS, incluindo Glue, S3, Athena, Managed Airflow e Iceberg
- Sólida compreensão de sistemas distribuídos e cargas de trabalho altamente paralelas
- Capacidade comprovada de otimizar consultas, particionar dados e projetar padrões eficientes de armazenamento
- Domínio do ecossistema de nuvem AWS; experiência com Azure ou GCP é um diferencial
- Experiência na definição de arquiteturas de longo prazo e estratégias de plataforma
- Forte capacidade de revisão de código, mentoria e liderança técnica
- Experiência prática em ambientes ágeis com colaboração entre equipes de engenharia
- Proficiência em Git, GitHub e Bitbucket em desenvolvimento com múltiplos repositórios
- Bacharelado em Ciência da Computação, Engenharia ou área relacionada, ou experiência equivalente
- Experiência profissional relevante
- Proficiência avançada em inglês
- Disponibilidade para viajar para São Carlos, São Paulo, quando necessário
- Experiência com dbt ou frameworks modernos de transformação de dados
- Conhecimento de programação concorrente e paralela
- Familiaridade com Python, Angular e TypeScript
- Experiência com bancos de dados vetoriais, como pgvector e campos vetoriais do Redis
- Experiência prática na aplicação de técnicas de IA/LLM a plataformas de dados, acesso a dados ou qualidade de software
Benefícios
- Modelo de trabalho remoto
- Programas inclusivos de contratação e desenvolvimento profissional
- Grupos de afinidade que apoiam comunidades sub-representadas, incluindo ExperianPride, Ubuntu, Women in Experian, Aspire e Connecting Generations