O que é um Crawler

O que é um Crawler

É um software que tem a função de explorar toda a Web com vista a recolher e classificar conteúdos como páginas web, imagens, vídeos, ficheiros, etc.
Este sistema também é conhecido como spider, robot, bot ou indexador.

Entre os crawlers mais conhecidos contam-se o Googlebot, Bingbot, Yahoo Slurp e DuckDuckBot.

Crawler

O que é um Crawler

O que é um Crawler

ÍNDICE

É um software que tem a função de explorar toda a Web com vista a recolher e classificar conteúdos como páginas web, imagens, vídeos, ficheiros, etc.
Este sistema também é conhecido como spider, robot, bot ou indexador.

Entre os crawlers mais conhecidos contam-se o Googlebot, Bingbot, Yahoo Slurp e DuckDuckBot.

Crawler

Mais sobre SEO

Link Farms

São websites que contêm listas incomensuráveis de links com o objetivo de manipular os motores de busca. Também se usa este termo para referir grupos de sites que lincam entre si.

Doorway Page

Técnica de SEO black hat destinada a melhorar o posicionamento nos motores de busca por determinados termos, enviando os utilizadores para uma página diferente daquela em que entraram.