A SunnyData é uma empresa de consultoria em engenharia de dados e inteligência artificial com foco em Databricks. Seus engenheiros certificados pela Databricks ajudam organizações a modernizar plataformas de dados, migrar data warehouses e data lakes corporativos legados e transformar iniciativas de inteligência artificial, aprendizado de máquina e inteligência artificial generativa em sistemas operacionais. A empresa também oferece suporte em governança de dados e MLOps, com experiência nos setores de saúde, serviços financeiros e logística.
Arquiteto principal de soluções, serviços financeiros — remoto nos Estados Unidos
Lidere o design e a entrega de soluções de dados, machine learning e IA baseadas em Databricks para clientes. A função combina arquitetura prática, atuação em pré-vendas, liderança de clientes e mentoria técnica.
Descrição
- Aconselhe clientes sobre estratégias de engenharia de dados e arquitetura, com ênfase em soluções Databricks.
- Projete, desenvolva e implemente plataformas de dados compatíveis com IA, machine learning e business intelligence.
- Ofereça orientação estratégica sobre a evolução das tecnologias e práticas de dados.
- Colabore com as equipes de vendas para comunicar soluções técnicas a clientes em potencial.
- Supervisione várias contas de clientes e comunique o progresso e os resultados das entregas.
- Desenvolva arquiteturas que apliquem práticas sólidas de governança, segurança e qualidade de dados.
- Avalie fontes de dados e recomende quais devem ser incorporadas para melhorar as análises.
- Apoie equipes internas, oriente grupos de projeto e treine usuários em produtos de dados e ambientes analíticos.
- Investigue problemas de sistemas e dados, determine as causas-raiz e implemente soluções adequadas.
- Valide pipelines de dados, lógica de transformação e componentes relacionados quanto à precisão e confiabilidade.
- Dedique aproximadamente a mesma proporção de tempo à entrega técnica prática e às atividades de pré-vendas.
Requisitos
- Pelo menos 10 anos de experiência prática como Arquiteto de Soluções e/ou Engenheiro de Dados Sênior.
- Experiência recente entregando soluções de dados com Databricks.
- Conhecimento especializado de Spark, Hadoop, Kafka, Databricks, pandas e scikit-learn.
- Domínio sólido de modelagem de dados, ETL, integração de dados e práticas modernas de engenharia de dados.
- Capacidade de liderar workshops complexos de descoberta de arquitetura e design de soluções, produzindo planos detalhados de implementação.
- Proficiência em Java, Python e/ou Scala.
- Experiência trabalhando com AWS, Azure e/ou Google Cloud Platform.
- Capacidade de escrever, solucionar problemas e otimizar consultas SQL.
- Excelentes habilidades de comunicação escrita e verbal, incluindo experiência de trabalho direto com clientes.
- Capacidade de criar e apresentar apresentações técnicas detalhadas para clientes e partes interessadas.
- Experiência no desenvolvimento de documentação abrangente de soluções, incluindo provas de conceito, roadmaps, diagramas de sequência, hierarquias de classes e visões lógicas de sistemas.
- Capacidade de colocar soluções técnicas em produção considerando desempenho, segurança, escalabilidade e integração confiável de dados.
- Experiência liderando, orientando e desenvolvendo equipes de engenharia.
- Bacharelado em Ciência da Computação ou área relacionada.
- É fortemente preferível residir no horário do Pacífico ou na Costa Oeste.
- Diferencial: familiaridade com tecnologias de armazenamento distribuído, como S3, ADLS, HDFS, GCS, Kudu, Elasticsearch/Solr, Cassandra ou outros sistemas NoSQL.
- Diferencial: experiência com Spark, Kafka, StreamSets, Matillion, Fivetran, NiFi, AWS Data Migration Services, Azure Data Factory e IICS.
- Diferencial: ampla experiência em todo o ciclo de vida do desenvolvimento de software.
- Diferencial: experiência automatizando a transformação e curadoria de dados com dbt, Spark, Spark Streaming e pipelines automatizados.
- Diferencial: experiência com ferramentas de gerenciamento e orquestração de workflows, incluindo Airflow, AWS Managed Airflow, Luigi e NiFi.
- Diferencial: experiência em serviços financeiros, idealmente no setor bancário.
- Diferencial: conhecimento dos requisitos e padrões de conformidade de TI bancária.
- Diferencial: pelo menos duas das seguintes certificações: Associate Developer for Apache Spark, Data Engineer Associate, Professional Data Engineer, Machine Learning Associate ou Professional ML Engineer.
Benefícios
- O plano de saúde para funcionários e familiares elegíveis começa no primeiro dia de trabalho.
- Pelo menos 20 dias de folga remunerada por ano.
- Nove feriados pagos pela empresa.
- Oportunidades de desenvolvimento profissional e crescimento na carreira.
- Oportunidades para ampliar tanto as habilidades técnicas quanto as de gestão de pessoas.
- Incentivos financeiros em dinheiro baseados no desempenho.
- Trabalho com tecnologias emergentes e líderes de todo o setor.
- Ambiente de trabalho colaborativo, com foco em trabalho em equipe e compartilhamento de conhecimento.