A Talent Matchmakers é uma parceira de recrutamento especializada em TI e profissionais técnicos, fundada em 2017. A empresa ajuda organizações a identificar e engajar candidatos para vagas na área de tecnologia, combinando conhecimento do ecossistema de TI com acesso a uma ampla rede de talentos. Seu processo de recrutamento é baseado na compreensão das necessidades de contratação de cada cliente, na manutenção de uma comunicação aberta, na seleção cuidadosa de candidatos e na gestão do processo com o mínimo de interrupção possível nas operações comerciais em andamento.
Engenheiro de Dados – Híbrido em Bucareste
Desenvolva pipelines escaláveis com Python, Spark, Kafka e Airflow para um cliente do setor de energia. Projete data lakes e data warehouses em nuvem que apoiem análises e aprendizado de máquina.
Descrição
- Desenvolver e manter pipelines e arquiteturas de dados resilientes para inteligência de negócios, análises e aprendizado de máquina
- Trabalhar em estreita colaboração com cientistas de dados, analistas, engenheiros e partes interessadas do negócio
- Converter requisitos de negócio em soluções de dados escaláveis e eficientes
- Explicar conceitos técnicos complexos com clareza para partes interessadas não técnicas
- Entregar soluções de processamento de dados de alto desempenho e escaláveis
- Aprimorar o armazenamento, a recuperação de dados e os fluxos de trabalho de ETL
- Liderar o design e o desenvolvimento de soluções de dados baseadas em nuvem
- Usar o GitLab para controle de versão e pipelines de código e implantação
- Escrever e otimizar consultas SQL enquanto integra várias fontes em data lakes e data warehouses
- Automatizar e simplificar pipelines de dados com scripts de shell e ferramentas relevantes
- Apoiar o desenvolvimento de engenheiros de dados juniores por meio de mentoria
- Liderar revisões de código e manter as melhores práticas de engenharia
Requisitos
- Bacharelado em uma disciplina STEM
- Pelo menos quatro anos de experiência como engenheiro de dados ou em função comparável, com histórico de entrega de soluções de dados em larga escala
- Conhecimentos avançados de SQL, incluindo desenvolvimento de consultas complexas
- Experiência sólida em programação Python para engenharia de dados, soluções personalizadas de processamento e automação
- Ampla experiência com Apache Spark e Apache Kafka para processamento distribuído e em lote
- Experiência prática com Apache Airflow para orquestração de fluxos de dados
- Experiência sólida com AWS ou outro provedor de nuvem
- Proficiência com GitLab para controle de versão e fluxos de trabalho de CI/CD
- Experiência prática com Docker e Kubernetes para conteinerização
- Experiência com dbt para transformação de dados
- Experiência com scripts de shell, como Bash
- Experiência com Java ou Scala além de Python
- Experiência com Apache Hive
- Compreensão de governança de dados, práticas de segurança e requisitos de conformidade
- Familiaridade com métodos ágeis e colaboração multifuncional
- Familiaridade com conceitos de aprendizado de máquina
- Forte capacidade de resolução de problemas e experiência com grandes conjuntos de dados complexos
- Excelentes habilidades de comunicação e colaboração entre equipes
- Capacidade de orientar engenheiros juniores e fornecer liderança técnica
Benefícios
- Colaboração B2B