Mindrift
Mindrift
501 – 1.000 Funcionários
Inteligência artificialMarketplaceSaaS
A Mindrift é um marketplace de talentos especializados em inteligência artificial e uma plataforma SaaS que conecta colaboradores profissionais e especialistas em diferentes áreas a projetos de treinamento e avaliação de IA de empresas de tecnologia. Como parte da Toloka, trabalha com redatores, editores, especialistas em controle de qualidade, cientistas e outros especialistas no assunto que ajudam a gerar dados de treinamento, avaliar a segurança e o raciocínio dos modelos, analisar a qualidade de conteúdo de mídia e criar cenários do mundo real para melhorar o desempenho e a confiabilidade da IA. A Mindrift seleciona e verifica os colaboradores por meio de avaliações e verificação de identidade e, em seguida, oferece oportunidades flexíveis de projetos remunerados relacionados ao treinamento e à avaliação de IA.

Engenheiro(a) Sênior de Web Scraping com Python (Freelance, Remoto em Portugal)

Desenvolva pipelines confiáveis de web scraping e processamento de dados para o projeto Tendem AI da Mindrift. Extraia, valide e escale conjuntos de dados estruturados de sites complexos e dinâmicos.

Descrição

  • Gerencie a extração completa de sites complexos, entregando conjuntos de dados estruturados completos, precisos e confiáveis
  • Use ferramentas e fluxos de trabalho personalizados para acelerar a coleta de dados, a validação e a conclusão de tarefas
  • Colete dados de fontes dinâmicas e interativas, adaptando-se a conteúdos renderizados em JavaScript e a mudanças no comportamento dos sites
  • Mantenha a qualidade dos dados por meio de verificações de validação, comparações entre fontes, requisitos de formatação e revisão sistemática
  • Expanda as operações de scraping para grandes conjuntos de dados por meio de processamento eficiente em lotes ou em paralelo
  • Acompanhe falhas de extração e preserve a estabilidade quando os sites passarem por pequenas mudanças estruturais
  • Aplique conhecimentos de web scraping, extração de dados e processamento de dados em fluxos de trabalho especializados do projeto Tendem

Requisitos

  • Tenha pelo menos cinco anos de experiência relevante em engenharia de dados, web scraping, automação ou desenvolvimento de software
  • Demonstre sólidos conhecimentos de scraping com Python e experiência com BeautifulSoup, Selenium ou ferramentas comparáveis, conteúdos JavaScript e AJAX, rolagem infinita, APIs e proxies
  • Demonstre capacidade de extrair informações de hierarquias complexas, páginas arquivadas e HTML inconsistente
  • Tenha uma base sólida em limpeza, normalização e validação de dados, com experiência na produção de conjuntos de dados estruturados em CSV, JSON e Google Sheets
  • Demonstre experiência no gerenciamento de proteções antibot e de mudanças na estrutura de sites em escala
  • Tenha experiência com AWS ou infraestrutura de nuvem comparável e conteinerização baseada em Docker
  • Tenha experiência prática aplicando frameworks de LLM, como LangChain, OpenRouter ou ferramentas similares, a tarefas de automação
  • Trabalhe com muita atenção aos detalhes e foco constante na precisão dos dados
  • Trabalhe de forma independente, assuma a responsabilidade pela solução de problemas e mantenha uma abordagem autônoma
  • Tenha proficiência em inglês no nível Upper-intermediate (B2) ou superior
  • Será considerado um diferencial ter bacharelado ou mestrado em Engenharia, Matemática Aplicada, Ciência da Computação ou disciplina técnica relacionada
  • Será considerado um diferencial incluir um link para um perfil no GitHub

Benefícios

  • Contrato freelance
  • Carga horária parcial estimada de 10 a 20 horas semanais durante as fases ativas do projeto
  • Modalidade de trabalho remoto
  • Oportunidade de trabalhar em projetos de tecnologia inovadores por meio da plataforma Mindrift

Vagas relacionadas

Maxibook OÜ

Colaborador em linguagem científica e adaptação com IA

Maxibook OÜ

Ajude a Maxibook, uma startup de educação com IA, a adaptar conteúdo científico em inglês para públicos coreanos, japoneses ou árabes. Avalie materiais gerados por IA quanto à precisão conceitual, à naturalidade da linguagem e à credibilidade acadêmica.

Abrir
SUXXEED Sales for your Success GmbH

Estudante trabalhador de engenharia de IA

SUXXEED Sales for your Success GmbH
201 – 500 Funcionários
B2BConsultoria

Junte-se à equipe de IA da SUXXEED para criar aplicações práticas de IA e automações para uma empresa especializada em vendas B2B. Trabalhe com colegas das áreas de IA, TI e negócios em um modelo híbrido.

Abrir
Peraton

Engenheiro(a) sênior de conectividade híbrida

Peraton

Projeta e soluciona problemas de conectividade entre a nuvem classificada da AWS, o Kubernetes e redes locais. Dá suporte às missões de segurança nacional e tecnologia governamental da Peraton.

Abrir