O Google revelou recentemente dois novos rastreadores focados em imagens e vídeos, utilizados para “pesquisa e desenvolvimento”.
Lançados em abril de 2023, os GoogleOther Crawlers são uma evolução do rastreador original utilizado por equipes internas do Google para pesquisas pontuais.
A descrição oficial do GoogleOther original esclarece: “é um rastreador genérico que pode ser usado por várias equipes de produto para coletar conteúdo publicamente acessível em sites. Por exemplo, ele pode ser usado para pesquisas pontuais de pesquisa e desenvolvimento”.
As duas novas variações do GoogleOther são o GoogleOther-Image e o GoogleOther-Video. Eles se diferenciam por buscar dados binários, como imagens e vídeos, que não podem ser visualizados em aplicativos de texto comuns.
A documentação do Google disponibiliza tokens de agente de usuário para ambos os rastreadores, permitindo que sites os bloqueiem através do arquivo robots.txt.
A documentação oficial não esclarece o impacto no rankeamento dos sites que bloquearem esses rastreadores, mas indica que o material coletado não será usado para treinar inteligência artificial, função desempenhada pelo rastreador “Google-Extended”.
