A YASH Technologies é uma empresa global de serviços de tecnologia e terceirização que ajuda organizações a modernizar suas operações e aumentar a produtividade. Seu trabalho abrange transformação digital, inteligência artificial e automação, serviços em nuvem, cibersegurança, IoT, gerenciamento de aplicações e consultoria empresarial. A empresa também apoia iniciativas de implementação de SAP e transformação para a nuvem, atendendo organizações de setores como consultoria, saúde e logística. Suas equipes desenvolvem soluções de tecnologia sob medida, com foco em resultados práticos para os negócios e no sucesso dos clientes.
Arquiteto técnico associado, Databricks — Pune presencial
Projete plataformas Lakehouse da AWS e do Databricks para a YASH Technologies, desenvolvendo pipelines de dados governados e soluções de GenAI com Python, PySpark e SQL.
Descrição
- Criar e aprimorar pipelines de dados escaláveis na AWS e no Databricks
- Desenvolver e administrar arquiteturas Lakehouse baseadas em Delta Lake, Iceberg e Unity Catalog
- Estabelecer práticas de governança que contemplem qualidade, linhagem, metadados e segurança de dados
- Criar fluxos de trabalho ETL e ELT com Python, PySpark e SQL
- Entregar recursos de GenAI, como chatbots RAG e agentes de IA
- Aplicar métodos de Context Engineering e busca semântica para fortalecer o desempenho da IA
- Colaborar com arquitetos, cientistas de dados e partes interessadas do negócio em iniciativas de dados corporativos
- Manter a escalabilidade, o desempenho, a confiabilidade e a eficiência de custos da plataforma
Requisitos
- Pelo menos 10 anos de experiência profissional
- Experiência prática com serviços de análise da AWS, incluindo S3, Glue, Athena, Redshift, Lake Formation, Lambda, DataZone e DynamoDB
- Experiência prática com tecnologias do Databricks, incluindo Delta Lake, Iceberg, Unity Catalog, Delta Live Tables, MLflow, Mosaic AI, Vector Search, Genie Agent e Genie One
- Domínio sólido de Python, PySpark e SQL
- Conhecimento prático de ETL e ELT, modelagem de dados, data warehousing, arquitetura Lakehouse e arquitetura Medallion
- Conhecimento de qualidade de dados, linhagem, gerenciamento de metadados, catalogação, observabilidade e segurança
- Experiência com AWS Bedrock, SageMaker, RAG, Context Engineering, busca semântica, agentes de IA e orquestração de LLMs
Benefícios
- Modalidades de trabalho flexíveis
- Modelos estruturados para o desenvolvimento de habilidades com foco na carreira
- Oportunidades de aprendizado, desaprendizado e reaprendizado contínuos
- Emprego estável
- Cultura de equipe inclusiva
- Ambiente de trabalho colaborativo
- Suporte alinhado à realização dos objetivos de negócio
- Ambiente de trabalho positivo e cultura corporativa ética