A EUROPEAN DYNAMICS desenvolve software de governo eletrônico e presta serviços de TI para instituições, organizações e grandes empresas em todo o mundo. Seu portfólio inclui registros civis e empresariais eletrônicos, sistemas de gestão de dados financeiros, plataformas de compras públicas, soluções em nuvem, consultoria, desenvolvimento de software sob medida e terceirização. A empresa também investe em pesquisa e desenvolvimento com foco em tecnologias emergentes da informação e comunicação e participa de projetos internacionais. Com operações em mais de 47 países, a EUROPEAN DYNAMICS enfatiza a qualidade e a segurança de seus produtos e serviços.
Engenheiro(a) sênior de analytics de bancos de dados
Desenvolva e otimize pipelines de dados com dbt, PySpark e Apache Iceberg para projetos de tecnologia do setor público europeu. A função híbrida fica em Bruxelas, com trabalho nas instalações da empresa ou do cliente.
Desenvolver pipelines e fluxos de trabalho confiáveis e escaláveis para transformação de dados.
Melhorar o desempenho dos projetos dbt e seus tempos de execução.
Criar e documentar verificações de qualidade de dados e controles de teste no dbt.
Configurar testes de regressão e validações automatizados para manter a qualidade e a consistência dos resultados dos pipelines.
Compartilhar práticas da equipe para manter e ampliar projetos dbt.
Transformar requisitos de negócio e documentos de análise em pipelines operacionais de transformação de dados.
Colaborar presencialmente com a equipe de Desenvolvimento e a equipe de TI de um grande cliente.
Requisitos
Graduação em Ciência da Computação, Tecnologia da Informação, Engenharia de Sistemas ou área relacionada, além de pelo menos 12 anos de experiência relevante em TI.
Experiência prática com dbt, de preferência dbt Core, para projetar, manter, testar, documentar e ampliar projetos de transformação analítica em produção.
Experiência em engenharia de analytics e modelagem moderna de dados, incluindo arquiteturas em camadas, macros reutilizáveis, controles de qualidade de dados e CI/CD.
Experiência escrevendo transformações PySpark para processamento de dados em larga escala; otimização de jobs Spark é um diferencial.
Experiência prática com Apache Iceberg, incluindo evolução de partições e esquemas, gerenciamento de snapshots e time travel.
Experiência com ferramentas de orquestração e agendamento de jobs, como Dagster.
Amplo conhecimento de SAS ETL e bases de código legadas; migrar fluxos de trabalho SAS para dbt é um grande diferencial.
Excelente domínio de SQL, incluindo transformações complexas, otimização de desempenho e processamento incremental.
Bom entendimento da execução do Apache Spark, particionamento, otimização de organização de arquivos e ajuste de desempenho.
Amplo conhecimento de validação, reconciliação e testes de dados durante a migração de sistemas legados para dbt e PySpark.
Conhecimento de controle de versão e desenvolvimento colaborativo, incluindo Git, revisões de código, gerenciamento de releases e pipelines de implantação automatizados.
Excelente domínio do inglês.
Benefícios
Remuneração competitiva de acordo com as qualificações e a experiência.
Opção entre trabalho por contrato ou pacote de remuneração com benefícios completos.
Processo de candidatura confidencial.
Ambiente de trabalho internacional, multilíngue e multicultural.
Desenvolva pipelines de dados escaláveis com dbt, PySpark e Iceberg. Apoie instituições europeias com engenharia analítica, testes e migração de sistemas SAS legados.