
A Blend360 é uma empresa de serviços profissionais que ajuda empresas da Fortune 1000 e outras grandes organizações a enfrentar desafios empresariais complexos por meio de inteligência artificial, análise de dados e soluções orientadas por dados. Seu trabalho abrange inteligência de negócios, engenharia de dados, ciência de dados, MLOps e governança de dados, reunindo equipes especializadas e recursos de IA para apoiar organizações dos setores de saúde, serviços financeiros, energia, varejo, tecnologia, mídia e telecomunicações, além de viagens e hospitalidade. O trabalho da Blend360 recebeu reconhecimentos, incluindo o prêmio de «Solução de IA do Ano» e a inclusão entre os «Principais Provedores de Serviços de IA Generativa de 2024».
Analista de engenharia de dados remoto — AWS e Spark
Crie pipelines de dados escaláveis e arquiteturas de data lake na AWS para a Blend360, provedora de serviços de IA. Desenvolva processamento com Spark e soluções de dados confiáveis para clientes globais.
Descrição
- Crie e mantenha pipelines de dados escaláveis e estruturas de ingestão.
- Dê suporte ao processamento em lote, em streaming e à captura de dados alterados (CDC).
- Crie e otimize fluxos de trabalho de dados com Apache Spark e PySpark.
- Implemente e gerencie data lakes na AWS usando Amazon S3 e Apache Iceberg.
- Orquestre ETL com AWS Glue e use Athena para consultas sem servidor e Lambda para processamento orientado a eventos.
- Configure controles de acesso a dados e segurança com AWS IAM.
- Trabalhe com analistas, cientistas de dados e engenheiros de plataforma para esclarecer necessidades e entregar soluções prontas para produção.
- Monitore a integridade dos pipelines e resolva problemas de qualidade de dados.
- Melhore a confiabilidade e a atualização dos dados.
- Documente fluxos de dados, decisões de arquitetura e padrões de engenharia.
Requisitos
- Tenha experiência prática avançada com serviços da AWS, como Glue, S3, Athena e IAM.
- Tenha experiência no processamento de dados com Apache Spark e PySpark.
- Compreenda arquiteturas de data lake; experiência com Apache Iceberg é desejável.
- Tenha experiência com padrões de ingestão em lote, em streaming e de captura de dados alterados (CDC).
- Use SQL para consultas, validação e análise exploratória.
- Compreenda modelagem de dados e processamento de dados em larga escala.
- Trabalhe bem com equipes multifuncionais.
- Explique conceitos técnicos com clareza para pessoas não técnicas.
- Experiência com infraestrutura como código ou ferramentas de orquestração, como Airflow, Step Functions ou dbt, é um diferencial.
- Tenha familiaridade com fluxos de desenvolvimento assistidos por IA e ferramentas de produtividade de engenharia.
- Tenha inglês avançado para se comunicar com equipes globais.
- Tenha pelo menos dois anos de experiência em engenharia de dados ou função relacionada.
- Tenha experiência prática na criação e manutenção de pipelines de dados em nuvem e arquiteturas de data lake na AWS.
Benefícios
- Os almoços diários na sede incluem opções vegetarianas, veganas, sem glúten e sem açúcar.
- Aproveite refeições gourmet às sextas-feiras, preparadas por um chef na sede.
- Há opções de trabalho flexível.
- Um MacBook e acessórios são fornecidos.
- Lanches e bebidas estão disponíveis diariamente na sede.
- A sede recebe eventos após o expediente, partidas de futebol e tênis e noites de jogos.
- Participe da liga de futebol às quartas e sextas-feiras.
- Participe de partidas de sinuca e competições por troféus do escritório.
- Há quadras de tênis disponíveis para partidas amistosas.
- São oferecidos campeonatos de xadrez, noites de jogos e noites musicais.
- Tenha acesso a apoio para certificações AWS, planos de estudo, cursos e outras certificações.
- Há aulas de inglês disponíveis.
- Participe do aprendizado entre colegas no Tech Tuesdays.
- Há oportunidades de mentoria e desenvolvimento.
- Receba presentes de aniversário e por tempo de casa.
- Trabalhe em uma localização conveniente com uma equipe forte.
Vagas relacionadas
Nenhuma vaga encontrada
Tente ajustar ou limpar os filtros para encontrar mais oportunidades.