SunnyData
SunnyData
A SunnyData é uma empresa de consultoria em engenharia de dados e inteligência artificial com foco em Databricks. Seus engenheiros certificados pela Databricks ajudam organizações a modernizar plataformas de dados, migrar data warehouses e data lakes corporativos legados e transformar iniciativas de inteligência artificial, aprendizado de máquina e inteligência artificial generativa em sistemas operacionais. A empresa também oferece suporte em governança de dados e MLOps, com experiência nos setores de saúde, serviços financeiros e logística.

Arquiteto sênior de soluções Databricks (remoto na Argentina)

Projete e entregue soluções de dados, engenharia e IA com Databricks para os clientes da SunnyData. Equilibre a entrega de projetos com a pré-venda, liderando a arquitetura, a implementação e o relacionamento com os clientes.

Descrição

  • Oriente clientes em engenharia e arquitetura de dados, com foco em soluções Databricks.
  • Equilibre o trabalho faturável em projetos com as responsabilidades de pré-venda, dividindo o tempo igualmente entre ambos.
  • Desenvolva e implante soluções de dados para iniciativas de IA, aprendizado de máquina e inteligência de negócios.
  • Trabalhe com as equipes de vendas para apresentar soluções técnicas a clientes em potencial.
  • Supervisione várias contas de clientes, acompanhe o progresso, cumpra os prazos de entrega e reporte os resultados.
  • Projete arquiteturas de dados que sigam boas práticas de governança, segurança e qualidade.
  • Avalie fontes de dados e recomende quais dados incluir.
  • Oriente equipes internas e mentore os colaboradores dos projetos.
  • Ajude usuários finais a entender produtos de dados e ambientes de análise.
  • Investigue problemas nos sistemas, corrija defeitos de dados e de sistemas e aplique medidas corretivas.
  • Valide a movimentação de dados, o código de transformação e os componentes de dados para garantir precisão e confiabilidade.

Requisitos

  • Ter pelo menos sete anos de experiência prática como arquiteto de soluções e/ou engenheiro sênior de dados.
  • Ter experiência recente na implementação de soluções de dados, especialmente com Databricks.
  • Ter conhecimento especializado em tecnologias de engenharia de dados, como Spark, Hadoop e Kafka.
  • Ter conhecimento especializado da plataforma Databricks.
  • Conhecer ferramentas de ciência de dados e aprendizado de máquina, como pandas e scikit-learn.
  • Entender fluxos de trabalho analíticos de ponta a ponta, incluindo modelagem de dados, ETL e integração de dados.
  • Ser capaz de liderar sessões complexas de descoberta de arquitetura e desenho de soluções.
  • Ser capaz de produzir projetos de arquitetura para implementação.
  • Ter proficiência em Java, Python e/ou Scala.
  • Ter experiência com AWS, Azure e/ou Google Cloud Platform.
  • Ser capaz de escrever, depurar e otimizar consultas SQL.
  • Comunicar-se com eficácia por escrito e oralmente, com experiência no contato direto com clientes.
  • Ser capaz de preparar e apresentar exposições detalhadas.
  • Ter criado documentação de soluções, como provas de conceito, roteiros, diagramas de sequência, hierarquias de classes e visões lógicas de sistemas.
  • Ter experiência na liderança de equipes e na mentoria de engenheiros.
  • Ser capaz de levar soluções técnicas de ponta a ponta à produção, com atenção a desempenho, segurança, escalabilidade e integração confiável de dados.
  • Ter bacharelado em Ciência da Computação ou em uma disciplina de engenharia relacionada.
  • Selecionar um nível de proficiência em inglês: básico, intermediário ou avançado.
  • É desejável ter pelo menos duas destas certificações Databricks: Associate Developer for Apache Spark, Data Engineer Associate, Professional Data Engineer, Machine Learning Associate ou Professional ML Engineer.
  • É desejável ter familiaridade com sistemas de armazenamento distribuído, incluindo S3, ADLS, HDFS, GCS, Kudu, ElasticSearch/Solr, Cassandra ou outros sistemas NoSQL.
  • É desejável ter experiência com ferramentas de integração de dados, como Spark, Kafka, Streamsets, Matillion, Fivetran, NiFi, AWS Data Migration Services, Azure DataFactory e IICS.
  • É desejável ter ampla experiência no ciclo de vida de desenvolvimento de software.
  • É desejável ter experiência em transformação e curadoria automatizadas de dados usando ferramentas como dbt, Spark, Spark Streaming e pipelines automatizados.
  • É desejável ter experiência com ferramentas de gerenciamento e orquestração de fluxos de trabalho, incluindo Airflow, AWS Managed Airflow, Luigi e NiFi.

Benefícios

  • Oportunidades de desenvolvimento profissional e crescimento na carreira.
  • Trabalho com tecnologias modernas e líderes em engenharia de dados e IA.
  • Faça parte de uma cultura colaborativa e acolhedora que incentiva o compartilhamento de conhecimento.
  • Igualdade de oportunidades no emprego.

Vagas relacionadas