É um software que tem a função de explorar toda a Web com vista a recolher e classificar conteúdos como páginas web, imagens, vídeos, ficheiros, etc.
Este sistema também é conhecido como spider, robot, bot ou indexador.
Entre os crawlers mais conhecidos contam-se o Googlebot, Bingbot, Yahoo Slurp e DuckDuckBot.
ÍNDICE
Mais sobre SEO
Tipos de pesquisa nos motores de busca
Quando usamos os motores de busca fazemo-lo essencialmente com três propósitos: Levar a cabo uma ação como comprar ou fazer um download; Obter uma informação; Visitar um site;
O que é SEO?
SEO é o acrónimo de Search Engine Optimization, ou seja, Optimização para os Motores de Busca, e é uma das actividades mais importantes no âmbito do Webmarketing.
O que é TLD
Sigla de Top Level Domain, faz parte da URL e aparece a seguir ao domínio.
O que é Link Canónico
Indica aos motores de busca que uma determinada página é a original ou "canónica" e, portanto, deve receber os respetivos créditos.
Link Farms
São websites que contêm listas incomensuráveis de links com o objetivo de manipular os motores de busca. Também se usa este termo para referir grupos de sites que lincam entre si.
SEO Black Hat
Um dos desafios constantes dos motores de busca resulta do facto de tentarem enganá-los. A isso chama-se SEO Black Hat.
