A Vultr é uma empresa global de infraestrutura em nuvem que oferece a desenvolvedores e empresas serviços sob demanda de computação, armazenamento, rede e banco de dados. Sua plataforma inclui máquinas virtuais, servidores bare metal, infraestrutura acelerada por GPU, bancos de dados gerenciados, armazenamento de objetos e em blocos, Kubernetes e aplicativos do marketplace prontos para implantação. Com suporte a GPUs AMD e NVIDIA, redes rápidas e infraestrutura em mais de 32 regiões de data centers, a Vultr atende cargas de trabalho de software, inteligência artificial e computação de alto desempenho por meio de APIs voltadas para desenvolvedores e ferramentas de nuvem escaláveis.
Engenheiro(a) sênior de dados, BigQuery
Crie pipelines confiáveis no BigQuery e conjuntos de dados governados para a plataforma global de infraestrutura em nuvem da Vultr. Trabalhe com as equipes de Engenharia, inteligência de negócios e ciência de dados para dar suporte à análise empresarial.
Estados Unidos$ 155.000 – $ 180.000 / ano
RemotoTempo integralSêniorIdioma Obrigatório: inglêsEngenheiro de dadosDescrição
- Crie e mantenha pipelines operacionais de dados no BigQuery, usando cargas incrementais e captura de dados alterados quando necessário.
- Crie conjuntos de dados bronze, silver e gold, incluindo entidades de negócios compartilhadas e métricas para relatórios.
- Automatize a validação de dados e a reconciliação entre sistemas de origem e conjuntos de dados de destino.
- Propague atualizações, exclusões e correções históricas dos dados de origem para os conjuntos de dados subsequentes.
- Monitore a integridade dos pipelines, gerencie exceções e alterações de esquema e documente procedimentos de recuperação e linhagem dos dados.
- Trabalhe com as equipes de inteligência de negócios e ciência de dados para fornecer conjuntos de dados documentados e de alto desempenho.
- Coordene com Engenharia e com as pessoas responsáveis pelos sistemas de negócios para resolver lacunas nos dados de origem e definir transferências de dados confiáveis.
- Defina e implemente padrões de engenharia para testes, implantação, segurança e gestão de custos dentro da arquitetura empresarial acordada.
- Revise os pipelines existentes e estabeleça práticas de engenharia replicáveis.
- Entregue conjuntos de dados de produção para as necessidades prioritárias de relatórios.
- Implemente controles iniciais de qualidade de dados e monitoramento.
- Verifique se as correções históricas dos dados de origem aparecem corretamente nos relatórios subsequentes.
Requisitos
- Pelo menos cinco anos de experiência em engenharia de dados, incluindo responsabilidade por pipelines de produção.
- Conhecimentos avançados de SQL e forte domínio de Python.
- Experiência em produção com BigQuery, incluindo particionamento, clustering, desempenho de consultas e controle de custos.
- Experiência com ferramentas de transformação e orquestração de dados, como dbt, Airflow, Cloud Composer, Dagster ou equivalentes.
- Experiência extraindo dados de bancos de dados operacionais e gerenciando cargas incrementais, atualizações, exclusões, recargas e correções históricas.
- Sólido entendimento de modelagem dimensional e acompanhamento de dados históricos.
- Experiência com verificações automatizadas de qualidade de dados, reconciliação, monitoramento, alertas e recuperação.
- Experiência com Git, revisão de código, testes automatizados e CI/CD.
- Capacidade de trabalhar com equipes de Engenharia, analytics e negócios.
- Experiência com MySQL, ClickHouse, Kafka ou Google Pub/Sub.
- Familiaridade com Parquet, eficiência de armazenamento e Spark ou PySpark.
- Capacidade de rastrear definições de dados e lógica de negócios no código de aplicações ou em um ORM; conhecimentos de PHP são um diferencial.
- Experiência com Salesforce, NetSuite, Power BI ou sistemas comparáveis.
- Familiaridade com IAM, contas de serviço, acesso com privilégio mínimo e autenticação segura de cargas de trabalho.
- Experiência com ferramentas de metadados, linhagem ou observabilidade de dados.
- Experiência aplicando IA ou automação às operações de pipelines, à investigação de incidentes ou ao acesso governado a dados para aplicações com LLM.
- Experiência em infraestrutura em nuvem, telecomunicações, data centers ou outro ambiente com uso intensivo de ativos.
Benefícios
- A empresa cobre 100% dos prêmios do seguro médico, odontológico e oftalmológico da pessoa funcionária.
- Contribuição equivalente a 100% dos aportes ao 401(k), até 4%, com aquisição imediata do direito aos valores.
- Reembolso anual de US$ 2.500 para desenvolvimento profissional.
- 11 feriados, folgas remuneradas acumuladas e um plano de transferência de saldo.
- Folgas remuneradas adicionais ao completar três e dez anos de empresa.
- Um mês de licença sabática remunerada a cada cinco anos.
- Bônus anual de aniversário de empresa.
- Ajuda de custo para escritório remoto de US$ 500 no primeiro ano e US$ 400 em cada ano seguinte.
- Reembolso de internet de até US$ 75 por mês.
- Reembolso de academia de até US$ 50 por mês.
- Assinatura do Wellable paga pela empresa.