
É o robot (daí o termo ‘bot’) usado pela DuckDuckGo para percorrer a Web, com vista a indexar os conteúdos encontrados e apresentá-los no seu motor de busca.
A estes sistemas também se dá o nome de crawler, spider ou indexador automático.
O DuckDuckGo permite que os webmasters lhe vedem a indexação de todo ou parte dos seus sites através do “robot.txt”.
Entre outros crawlers conhecidos contam-se o Googlebot, Bingbot e Yahoo Slurp.



![[INFOGRAFIA] O que é SEO?](https://pwm.pt/wp-content/uploads/2018/04/infografia-o-que-e-seo.jpg)



