Gå til innholdet

Gjennomsøking

Gjennomsøking er en bots automatiske henting av nettsider og ressurser, eksempelvis for behandling i en søkemotor.

Også kjent somCrawling
Søk og synlighet

En bot henter en adresse

Ved gjennomsøking besøker et automatisert program kjente eller nyoppdagede URL-er og henter innholdet. Søkemotorer bruker slike crawlere til å undersøke sider. I et oppdiktet eksempel finner en bot en veiledning via en intern lenke og forsøker deretter å hente den.

Oppdagelse og vellykket henting er ulike trinn. Serverfeil, tilgangsbegrensninger eller regler for gjennomsøking kan påvirke hentingen; nødvendige ressurser kan også være viktige for rendering. Et loggført botbesøk beviser verken full forståelse, indeksering eller god plassering. Kontroller derfor hvilken adresse som ble nådd med hvilket svar og tilgjengelig innhold, i stedet for bare å telle besøk.

Kilder