Um programa que "engatinha" em toda a World Wide Web, automaticamente coleta páginas da Web. Maioria das aranhas vão seguir todos os links em uma página, cada página, de catalogação, até chegar a um beco sem saída. , Então ele vai começar em uma nova página. Aranhas são usadas principalmente pelos motores de busca da Web para coletar dados de banco de dados do mecanismo de pesquisa. Pesquisa motores realmente não Pesquisar toda a Internet, quando um usuário digita um termo de pesquisa. Em vez disso, eles olham para o banco de dados de páginas Web coletados por sua aranha.