A Sigma Software Group é uma empresa multinacional de consultoria em tecnologia fundada em 2002. Suas equipes oferecem desenvolvimento de software, design gráfico, testes e suporte técnico para clientes de setores como automotivo, saúde, telecomunicações, aviação, bancos, jogos, mercado imobiliário e publicidade. A empresa contrata especialistas em TI para trabalhar em projetos complexos de engenharia e apoia o desenvolvimento profissional por meio de mentoria e aprendizado contínuo. O trabalho remoto faz parte de seu modelo de trabalho, com projetos para organizações como AstraZeneca, Scania e SAS.
Engenheiro(a) de Dados Pleno (Azure, Spark) — remoto na Polônia
Crie plataformas de dados no Azure e pipelines escaláveis para dar suporte a análises e operações. Desenvolva fluxos de trabalho com Spark, modelos de dados e soluções confiáveis na nuvem.
Descrição
- Crie plataformas e pipelines de dados escaláveis e confiáveis para análises e operações
- Desenvolva fluxos distribuídos de processamento de dados com Apache Spark, PySpark e Databricks
- Expanda a plataforma de dados em nuvem usando Azure Data Factory, Synapse, Event Hub e Azure Data Lake Storage
- Crie modelos de dados para análises, relatórios e usos posteriores
- Integre e processe dados de várias fontes, mantendo a qualidade e a consistência
- Monitore e melhore o desempenho, a confiabilidade e a escala dos pipelines
- Trabalhe com analistas, cientistas de dados e engenheiros para transformar requisitos em soluções
- Fortaleça as práticas de engenharia de dados, os testes e a confiabilidade operacional
- Avalie e adote ferramentas e tecnologias para o ecossistema de engenharia de dados
Requisitos
- Pelo menos quatro anos de experiência prática em engenharia de dados ou na criação de plataformas de processamento de dados
- Sólidos conhecimentos de SQL
- Boa experiência com Python para desenvolver pipelines
- Experiência com frameworks de processamento distribuído, como Apache Spark ou PySpark; Databricks é desejável
- Experiência prática no projeto e na implementação de pipelines em ambientes de nuvem; Azure é desejável
- Experiência com sistemas analíticos em escala de produção e modelagem de dados
- Conhecimento de design ETL/ELT, modelagem dimensional e princípios de data warehouse
- Experiência com arquiteturas modernas de data lake e formatos como Parquet e JSON
- Familiaridade com ferramentas de orquestração de fluxos de trabalho, como Airflow
- Experiência no desenvolvimento e na otimização de bancos de dados
- Capacidade de projetar soluções escaláveis com supervisão mínima
- Boas habilidades de colaboração e comunicação
- Proficiência profissional em inglês
Benefícios
- Oportunidades de crescimento profissional
- Ambiente de trabalho acolhedor
- Benefícios competitivos
- Opção de trabalho remoto