A FINNOMENA é uma empresa tailandesa de tecnologia financeira que atua na interseção entre finanças e mídia. Sua plataforma ajuda investidores individuais a pesquisar os mercados, acompanhar notícias financeiras, comparar fundos de investimento, consultar recomendações e gerenciar decisões de investimento. Além de alertas de mercado, análises semanais, filtros de fundos e informações de preços em tempo real, como cotações do ouro, a FINNOMENA oferece suporte à abertura de contas e à compra de fundos de investimento, incluindo acesso aos fundos que administra. A empresa reúne conteúdo sobre investimentos, ferramentas de pesquisa e distribuição de fundos em um único serviço para investidores de varejo.
Engenheiro(a) Associado(a) de Análise de Dados – FINNOMENA, Tailândia híbrida
Engenheiro(a) associado(a) de análise de dados responsável por pipelines em SQL, Python e PySpark, com foco em ingestão no Google Cloud, qualidade dos dados, monitoramento e suporte à análise.
Descrição
- Desenvolver e manter os fluxos ETL e ELT em lote atribuídos, usando SQL, Python e PySpark
- Dar suporte à ingestão de bancos de dados, APIs, arquivos e fontes do Google Workspace
- Aplicar práticas básicas de limpeza e transformação de dados, além da validação da origem ao destino
- Contribuir para o desenvolvimento e a manutenção de pipelines de streaming com Google Cloud Pub/Sub e Datastream
- Criar e manter verificações para identificar dados ausentes, duplicados, inválidos ou atrasados
- Acompanhar fluxos em lote e de streaming, a atualização dos dados e a integridade geral dos pipelines
- Inspecionar logs, resolver problemas rotineiros e escalar incidentes mais complexos
- Dar suporte a novas execuções autorizadas de pipelines e às atividades de reprocessamento de dados
- Montar conjuntos de dados para uso posterior em análises e relatórios
- Ajudar a manter dashboards que acompanham o status dos pipelines e a qualidade dos dados
- Registrar mapeamentos de dados, lógica de transformação, critérios de validação e procedimentos de solução de problemas
- Trabalhar com Git e participar de revisões de código e testes antes do lançamento
Requisitos
- Aceitam-se recém-formados e candidatos com até dois anos de experiência relevante
- Conhecimento prático de SQL, Python e PySpark
- Capacidade de desenvolver e manter fluxos ETL e ELT em lote
- Capacidade de dar suporte à ingestão de bancos de dados, APIs, arquivos e fontes do Google Workspace
- Compreensão das práticas de limpeza e transformação de dados e de validação da origem ao destino
- Capacidade de contribuir para pipelines de streaming desenvolvidos com Google Cloud Pub/Sub e Datastream
- Capacidade de criar e manter verificações de qualidade dos dados
- Capacidade de monitorar pipelines, inspecionar logs e resolver problemas rotineiros
- Capacidade de documentar mapeamentos de dados, lógica de transformação, critérios de validação e procedimentos de solução de problemas
- Experiência ou familiaridade com Git, revisões de código e testes de software
- Familiaridade com serviços do Google Cloud, como BigQuery, Dataform, Google Cloud Storage, Managed Service for Apache Airflow, Managed Service for Apache Spark, Pub/Sub e Datastream
Benefícios
- Experiência prática trabalhando com a plataforma de dados do Google Cloud da equipe
- Mentoria e suporte em revisões de código por colegas experientes