SDG Group
SDG Group
A SDG Group é uma consultoria global focada em dados, analytics e inteligência artificial. Fundada em 1994, ajuda organizações a transformar dados complexos em insights práticos para os negócios, combinando experiência em processos com tecnologia avançada e plataformas de analytics de fornecedores líderes de software. Com mais de 2.000 consultores atuando em diferentes localidades internacionais, a SDG Group apoia clientes que buscam promover a transformação e a inovação orientadas por dados. Sua área de carreiras inclui oportunidades de desenvolvimento pessoal e profissional em um modelo de trabalho flexível, desenvolvido para contribuir para o equilíbrio entre vida pessoal e profissional.

Consultor sênior de engenharia de dados em Databricks

Lidere a entrega de projetos de engenharia de dados para clientes da SDG Group, criando soluções escaláveis no Databricks e otimizando transformações SQL. Oriente decisões técnicas, mentore colegas e ajude clientes a conectar plataformas de dados na nuvem aos resultados de negócio.

Descrição

  • Criar, testar, manter e dar suporte contínuo a soluções de dados escaláveis no Databricks.
  • Aprimorar consultas SQL complexas e a lógica de transformação por meio da investigação e otimização de desempenho.
  • Liderar frentes de trabalho de engenharia de dados e tomar decisões técnicas bem fundamentadas.
  • Conectar fontes de dados estruturados e não estruturados usando métodos ETL/ELT e ferramentas de integração.
  • Projetar e revisar modelos de dados e estruturas de data warehouse escaláveis para relatórios, análises, IA e usos posteriores.
  • Contribuir para a arquitetura e modernização de plataformas de dados na nuvem.
  • Definir boas práticas de entrega para desenvolvimento, testes, documentação, implantação, facilidade de manutenção e governança.
  • Resolver e aprimorar questões de qualidade, confiabilidade e escalabilidade dos dados, além do desempenho de consultas e pipelines.
  • Trabalhar com as partes interessadas do cliente para esclarecer necessidades, explicar alternativas, recomendar soluções, alinhar expectativas técnicas e relacionar decisões de engenharia aos resultados de negócio.
  • Coordenar equipes multidisciplinares, revisar trabalhos técnicos, compartilhar práticas e orientar engenheiros e consultores juniores.
  • Manter-se atualizado sobre os recursos do Databricks, métodos de engenharia de dados e práticas do setor.
  • Compartilhar conhecimentos e oferecer liderança técnica em toda a comunidade SDG.

Requisitos

  • Ter aproximadamente 5–7 anos ou mais de experiência em engenharia de dados, data warehousing, integração de dados, engenharia analítica ou área técnica relacionada.
  • Demonstrar histórico de responsabilidade por entregas técnicas complexas.
  • Ter ampla experiência profissional e prática com Databricks, incluindo cargas de trabalho de engenharia de dados e análise em produção.
  • Usar Databricks SQL em nível avançado.
  • Aplicar conhecimentos avançados de SQL em joins, CTEs, funções de janela, agregações, transformações complexas, otimização de desempenho e validação de dados.
  • Trabalhar com confiança em Python ou outra linguagem relevante de programação ou scripting.
  • Entender profundamente pipelines de dados, ETL/ELT, integração, data warehousing, padrões de transformação e práticas de engenharia de dados em produção.
  • Entender modelagem dimensional e conceitos modernos de modelagem de dados.
  • Ter sólida experiência com ambientes modernos de nuvem e plataformas de dados em escala empresarial.
  • Ter trabalhado com ferramentas modernas de engenharia, orquestração ou transformação de dados.
  • Liderar validação e reconciliação de dados, investigação de problemas e otimização de desempenho em vários sistemas de origem e destino.
  • Aplicar bom discernimento analítico e arquitetural.
  • Comunicar-se com eficácia por escrito e em conversas.
  • Liderar discussões técnicas, influenciar partes interessadas, explicar assuntos complexos com clareza e conquistar a confiança dos clientes.
  • Orientar colegas e continuar desenvolvendo habilidades técnicas e de consultoria.
  • Experiência em consultoria ou em outras funções com contato direto com clientes é fortemente desejável.
  • Experiência com Matillion e/ou dbt é altamente desejável.
  • É desejável experiência com Databricks SQL Warehouses, Delta Lake ou Delta Tables, Databricks Workflows, Unity Catalog, Snowflake, PySpark e migração ou modernização de dados empresariais em larga escala.
  • É desejável experiência nos setores farmacêutico, de ciências da vida, de saúde ou em outro setor altamente regulado.

Benefícios

  • Trabalho em tempo integral em um setor de alta tecnologia em crescimento.
  • Cultura baseada em mérito que apoia a progressão na carreira e o desenvolvimento profissional.
  • Remuneração competitiva.
  • Plano de aposentadoria 401(k) com contribuição equivalente da empresa.
  • Cobertura médica, odontológica, oftalmológica e por incapacidade.
  • Pelo menos três semanas de férias remuneradas.
  • Calendário flexível de feriados.
  • Trabalho híbrido, combinando atividades presenciais e remotas.
  • Treinamento contínuo e experiência com tecnologias modernas de dados, análise e IA.
  • Ambiente de trabalho colaborativo com profissionais experientes.
  • Projetos relevantes para clientes.