Crawler

Il Crowler (denominato anche spider o robot) è un software utilizzato in particolar modo dai motori di ricerca per indicizzare o aggiornare automaticamente le pagine di un sito web all’interno dei proprio indici. I crowler dei motori di ricerca scandagliano quotidianamente la rete seguendo i collegamenti ipertestuali di un sito alla ricerca di nuove risorse web da inserire nei database dei motori. La loro funzione è quella di acquisire una copia delle pagine web visitata e di inserirla nell’indice che fornisce i risultati alle serps di un motore di ricerca.

Termini correlati a Crawler

• Risultati Naturali
• SERP
• Spider