A dentsu Austria é a unidade austríaca do grupo global Dentsu e ajuda organizações a lidar com transformação empresarial, marketing e crescimento sustentável. Seu trabalho combina pesquisa, análise, expertise em mídia e soluções integradas para ajudar marcas a navegar por mercados em mudança e criar experiências relevantes. Como parte de uma rede internacional, a dentsu Austria reúne perspectivas de marketing, mídia e serviços empresariais para transformar desafios complexos em oportunidades práticas para seus clientes, seus públicos e a sociedade.
Líder técnico sênior de AWS, engenharia de dados — presencial em Pune
Lidere o design e a entrega de plataformas de dados escaláveis na AWS para clientes empresariais. Crie pipelines seguros em lote e de streaming com SQL, Python, Spark e automação de infraestrutura.
Descrição
- Projetar soluções de engenharia de dados na AWS que atendam aos padrões empresariais
- Desenvolver e otimizar pipelines em lote e de streaming com tecnologias nativas da AWS e de código aberto
- Criar transformações SQL e pipelines Python para cargas de trabalho analíticas
- Modelar dados para escalabilidade, desempenho e eficiência de custos
- Gerenciar o trabalho de engenharia de dados desde o desenvolvimento até o suporte em produção
- Melhorar o desempenho, controlar custos e planejar a capacidade da plataforma
- Diagnosticar falhas complexas em pipelines e em produção por meio de análise de causa raiz
- Entregar soluções que atendam às expectativas de segurança, confiabilidade e escalabilidade
- Colaborar com arquitetos, responsáveis pelo produto e partes interessadas dos clientes
- Transformar necessidades de negócio e análise em soluções de dados confiáveis na AWS
- Fornecer estimativas técnicas, orientação de implementação e análise de trade-offs
- Apoiar o planejamento de soluções e as revisões de design técnico
- Aplicar e aprimorar padrões de codificação, documentação e práticas de engenharia de dados
- Participar de revisões de código e iniciativas de melhoria contínua
- Manter a conformidade com os requisitos da AWS, de segurança e regulatórios
Requisitos
- Ter de 6 a 10 anos de experiência profissional
- Demonstrar amplo conhecimento prático dos serviços de dados da AWS, incluindo Amazon S3, Glue, Athena e Redshift
- Projetar arquiteturas de data lakes e data warehouses nativas da nuvem na AWS
- Entender profundamente o design de pipelines em lote e de streaming
- Criar fluxos de trabalho escaláveis e tolerantes a falhas para ingestão e transformação
- Usar SQL avançado para transformações, agregações, análises e otimização de desempenho
- Trabalhar com grandes conjuntos de dados no Amazon Redshift e no Athena
- Escrever Python com qualidade de produção para aplicações de engenharia de dados
- Criar componentes ETL, utilitários e pipelines reutilizáveis
- Aplicar princípios de modelagem de dados, transformação e otimização de desempenho
- Usar Spark, PySpark ou frameworks comparáveis de processamento distribuído
- Lidar com dados estruturados, semiestruturados e não estruturados
- Entender design de esquemas, particionamento e otimização de consultas
- Usar Terraform e/ou CloudFormation para infraestrutura como código
- Criar e manter pipelines de CI/CD para plataformas de dados
- Trabalhar com cargas de trabalho conteinerizadas, como Docker e ECS/EKS
- Assumir a responsabilidade pela qualidade da solução, pelo desempenho e pela estabilidade em produção
- Comunicar-se com eficácia com arquitetos, equipes de DevOps e QA e partes interessadas do negócio
- Ter bacharelado ou mestrado em ciência da computação, sistemas de informação, engenharia de dados ou área relacionada
- Ter uma certificação AWS Data Analytics ou Solutions Architect, além de outras duas certificações da lista
- Certificações em Databricks, Snowflake ou outras plataformas de dados em nuvem são desejáveis
- Ter disponibilidade para trabalhar das 12h às 21h ou das 14h às 23h, no horário da Índia