Mindrift
Mindrift
501 – 1.000 Funcionários
Inteligência artificialMarketplaceSaaS
A Mindrift é um marketplace de talentos especializados em inteligência artificial e uma plataforma SaaS que conecta colaboradores profissionais e especialistas em diferentes áreas a projetos de treinamento e avaliação de IA de empresas de tecnologia. Como parte da Toloka, trabalha com redatores, editores, especialistas em controle de qualidade, cientistas e outros especialistas no assunto que ajudam a gerar dados de treinamento, avaliar a segurança e o raciocínio dos modelos, analisar a qualidade de conteúdo de mídia e criar cenários do mundo real para melhorar o desempenho e a confiabilidade da IA. A Mindrift seleciona e verifica os colaboradores por meio de avaliações e verificação de identidade e, em seguida, oferece oportunidades flexíveis de projetos remunerados relacionados ao treinamento e à avaliação de IA.

Engenheiro(a) sênior de scraping de dados em Python — remoto no Japão

Desenvolva fluxos confiáveis de scraping web em Python para o projeto Tendem AI da Mindrift. Extraia, valide e escale conjuntos de dados estruturados de sites complexos e dinâmicos.

Descrição

  • Liderar a extração de dados de ponta a ponta em sites complexos
  • Entregar conjuntos de dados estruturados completos, precisos e confiáveis
  • Usar ferramentas disponíveis e fluxos de trabalho personalizados para acelerar a coleta, a validação e a execução de tarefas
  • Extrair dados de fontes dinâmicas e interativas, incluindo conteúdo renderizado por JavaScript
  • Ajustar os métodos de scraping conforme o comportamento dos sites muda
  • Manter a qualidade dos dados por meio de validação, verificações entre fontes, padrões de formatação e verificação sistemática
  • Escalar o scraping de grandes volumes com processamento eficiente em lotes ou processamento paralelo
  • Monitorar falhas e preservar a estabilidade durante pequenas mudanças na estrutura dos sites
  • Aplicar Apify, OpenRouter e outras tecnologias à extração e ao processamento web

Requisitos

  • Pelo menos 5 anos de experiência relevante em engenharia de dados, scraping web, automação ou desenvolvimento de software
  • Bacharelado ou mestrado em Engenharia, Matemática Aplicada, Ciência da Computação ou área técnica relacionada será considerado um diferencial
  • Forte experiência com scraping em Python usando BeautifulSoup, Selenium ou ferramentas semelhantes, conteúdo dinâmico como JavaScript, AJAX e rolagem infinita, além de APIs acessadas por meio de proxies
  • Capacidade de extrair dados de estruturas complexas, incluindo hierarquias, páginas arquivadas e HTML inconsistente
  • Sólida experiência em limpeza, normalização e validação de dados, com experiência na entrega de conjuntos de dados em CSV, JSON ou Google Sheets
  • Experiência gerenciando mecanismos antibot e estruturas dinâmicas de sites em escala
  • Experiência com AWS ou infraestrutura de nuvem equivalente
  • Experiência usando Docker para conteinerização
  • Experiência prática com frameworks de LLM, como LangChain, OpenRouter ou ferramentas semelhantes para automação
  • Forte atenção aos detalhes e compromisso com a precisão dos dados
  • Perfil autodirigido, com capacidade de solucionar problemas de forma independente
  • Proficiência em inglês intermediário-avançado (B2) ou superior
  • Link para o GitHub será considerado um diferencial

Benefícios

  • Oportunidade de trabalho freelance
  • Trabalho em meio período, estimado em aproximadamente 10–20 horas por semana durante as fases ativas
  • Trabalho remoto
  • Oportunidade de contribuir para projetos inovadores de tecnologia e desenvolvimento de IA

Vagas relacionadas

IFM Investors

Analista de atendimento ao cliente – IFM Investors

IFM Investors
501 – 1.000 Funcionários
B2BFinançasPrivate equity

Dá suporte a relatórios para clientes, transações de capital e dúvidas operacionais na IFM Investors, gestora global de ativos. Ajuda a aprimorar a precisão dos relatórios, a eficiência operacional e a experiência do cliente.

Abrir
Grupo A365

Representante remoto de vendas e atendimento ao cliente em call center

Grupo A365
1.001 – 5.000 Funcionários
ConsultoriaCuidados de saúdeLogística

Vaga remota de vendas com vendas cruzadas e atendimento telefônico ao cliente para a Entel Chile. Gerencie chamadas e oportunidades de venda, cumpra metas de desempenho e participe de breves sessões de treinamento.

Abrir