Søkerobot

Fra Wikipedia, den frie encyklopedi

Gå til: navigasjon, søk

Søkerobot (eller crawler) er et dataprogram som samler sammen nettsider, typisk for å sende til en søkemotor.

Når crawleren besøker en internett-side, gjennomsøker den siden for å finne lenker til andre sider. Deretter henter den inn disse sidene også, og slik fortsetter det helt til den har hentet alt man har bedt den om.

De store internett-søkemotorene har hundrevis av crawlere som jobber på spreng for å sanke sammen så mange som mulig av verdens nettsteder.

[rediger] Se også

[rediger] Eksterne lenker

Personlige verktøy
Opprett en bok