Keep IT Simple
Keep IT Simple
A Keep IT Simple (KIS) é uma fornecedora de serviços e soluções de TI sediada no Vale do Silício, que atende organizações em toda a Califórnia e além. Fundada em 1988, a empresa ajuda seus clientes a lidar com necessidades tecnológicas complexas por meio de serviços de cibersegurança, virtualização, soluções em nuvem e consultoria em infraestrutura de redes. Seu trabalho abrange setores como logística, saúde e cibersegurança, com ênfase em orientação prática de TI, soluções econômicas e atendimento ágil ao cliente.

Engenheiro(a) sênior de dados, Databricks e plataformas de dados com IA

Lidere o desenvolvimento de plataformas de dados com Databricks para uma empresa global de seguros e gestão de ativos. Viabilize análises em nuvem, IA e aprendizado de máquina, governança e modernização empresarial.

Descrição

  • Projete e mantenha pipelines de dados escaláveis com Databricks, Spark e tecnologias em nuvem.
  • Desenvolva e otimize estruturas de ingestão de dados em lote e em tempo real.
  • Crie padrões de engenharia reutilizáveis e aceleradores para soluções de dados corporativas.
  • Implemente qualidade de dados, observabilidade, linhagem e governança em todo o ecossistema de dados.
  • Dê suporte a iniciativas de modernização de dados em grande escala e migração para a nuvem.
  • Projete arquiteturas Delta Lake e modelos de dados Medallion.
  • Desenvolva pipelines ETL e ELT otimizados usando notebooks, workflows e Delta Live Tables do Databricks.
  • Defina práticas de ajuste de desempenho, otimização de custos e gerenciamento de cargas de trabalho.
  • Use o Unity Catalog para gerenciar a governança, a segurança e os metadados dos dados.
  • Implemente pipelines de CI/CD e infraestrutura como código para implantações do Databricks.
  • Projete arquiteturas de dados nativas em nuvem para Azure e AWS.
  • Integre fontes corporativas, incluindo SQL Server, Oracle, APIs, SaaS e plataformas de streaming.
  • Crie serviços de dados resilientes e seguros que atendam a requisitos de alta disponibilidade e recuperação de desastres.
  • Trabalhe com as equipes de infraestrutura e segurança para aplicar controles de segurança em nuvem e padrões de conformidade.
  • Crie e otimize produtos de dados para cargas de trabalho de IA, aprendizado de máquina e IA generativa.
  • Desenvolva pipelines de engenharia de atributos e conjuntos de dados selecionados para treinamento e inferência de modelos.
  • Dê suporte a bancos de dados vetoriais, busca semântica, geração aumentada por recuperação e aplicações de LLMs.
  • Trabalhe em parceria com cientistas de dados e engenheiros de IA para colocar soluções de aprendizado de máquina em operação.
  • Aplique práticas de MLOps e DataOps para viabilizar a entrega escalável de soluções de IA.
  • Lidere iniciativas complexas de engenharia de dados.
  • Defina padrões de arquitetura, práticas de engenharia e diretrizes de desenvolvimento.
  • Oriente profissionais de engenharia júnior e de nível intermediário.
  • Revise arquiteturas e forneça recomendações técnicas.
  • Promova a automação, a observabilidade e as práticas de engenharia de plataformas.

Requisitos

  • Bacharelado em ciência da computação, tecnologia da informação, engenharia ou área relacionada.
  • Pelo menos 8 anos de experiência em engenharia de dados, data warehousing ou desenvolvimento de plataformas de dados.
  • Pelo menos 5 anos de experiência prática com Databricks e Apache Spark.
  • Experiência no projeto e na implementação de plataformas de dados em nuvem em escala corporativa.
  • Experiência liderando iniciativas técnicas e orientando equipes de engenharia.
  • Experiência com Databricks, Apache Spark (PySpark e Spark SQL), Delta Lake, Delta Live Tables, Unity Catalog, data warehousing e modelagem de dados.
  • Experiência com Python, SQL e PowerShell ou automação por scripts.
  • Experiência com Microsoft Azure, AWS e serviços nativos de armazenamento e processamento em nuvem.
  • Experiência com SQL Server, Oracle, PostgreSQL e bancos de dados.
  • Experiência com Azure Data Factory, Databricks Workflows, Kafka ou streaming de eventos e APIs REST.
  • Experiência com GitHub, Azure DevOps, pipelines de CI/CD, Terraform e infraestrutura como código.
  • Conhecimento de ferramentas de monitoramento e alertas, frameworks de qualidade de dados, otimização de desempenho, logging e solução de problemas.
  • Conhecimento de pipelines de dados para aprendizado de máquina, feature stores, MLOps, conceitos de IA generativa, bancos de dados vetoriais, geração aumentada por recuperação, governança de IA e princípios de IA responsável.
  • Certificações desejáveis: Databricks Certified Data Engineer Professional, Azure Data Engineer Associate ou AWS Data Analytics.
  • Experiência desejável em setores regulados, programas corporativos de governança de dados e integrações de IA em produção.
  • Pensamento estratégico, resolução de problemas, liderança técnica, desenho de arquitetura, gestão de stakeholders, habilidades de comunicação e apresentação, melhoria contínua, inovação e adoção de IA, além de atenção a riscos e conformidade.

Benefícios

  • Modelo de contratação: prestador(a) de serviços independente (Pessoa Jurídica, PJ).
  • Modelo de trabalho híbrido, com opção de trabalhar remotamente parte do tempo.

Vagas relacionadas

Nivoda

Engenheiro(a) sênior de IA e aprendizado de máquina, remoto nos Estados Unidos

Nivoda

Desenvolva sistemas de classificação, recomendação e busca multimodal para o marketplace global de joias da Nivoda e as vitrines de joalheiros. Crie recursos de aprendizado de máquina em produção para busca, descoberta de produtos e correspondência de imagens.

Abrir
CET Logistics

Especialista em Relacionamento Empresarial – CET Logistics

CET Logistics

Conecta empresas e instituições aos programas da CET de redução de resíduos e eficiência energética. Constrói redes de indicação, qualifica oportunidades, coordena encaminhamentos e apoia iniciativas de redução de carbono.

Abrir
FHI 360

Diretor associado de Compras, Administração e Logística

FHI 360

Lidera as áreas de compras, administração, logística e operações do escritório nacional da FHI 360 na República Democrática do Congo. Supervisiona as lideranças funcionais e assegura o cumprimento dos requisitos de doadores, governo e cadeia de suprimentos.

Abrir
CaixaBank

Cientista de dados de risco operacional

CaixaBank

Trabalhe no CaixaBank como cientista de dados de risco operacional, desenvolvendo modelos preditivos para estimar perdas e avaliar impactos na organização. A função envolve análise avançada e migração de processos para o Google Cloud.

Abrir
CaixaBank

Cientista de dados de risco operacional

CaixaBank

Desenvolva modelos preditivos e pipelines de dados no Google Cloud para apoiar a gestão de risco operacional do CaixaBank. Contribua para a estimativa de perdas, a elaboração de relatórios e a mitigação de riscos, com atuação em Madri ou Barcelona.

Abrir
AlphaSys

Especialista sênior em migração de dados Salesforce

AlphaSys

Lidere migrações completas de dados para Salesforce em organizações sem fins lucrativos e instituições beneficentes da Austrália, da estratégia e dos processos ETL aos testes e à implantação. A função combina conhecimentos de SQL e engenharia de dados com workshops para clientes, liderança de equipe e entrega de projetos.

Abrir