Robotsdirektiv
Robotsdirektiver gir søkemotorer som støtter dem, regler for indeksering eller visning. Også søkeroboten og leveringsveien har betydning.
Et robotsdirektiv er en instruksjon til søkemotorenes søkeroboter, for eksempel om indeksering av en side eller visning av utdrag i søkeresultater. Hvilke regler som gjelder, avhenger av den aktuelle søkeroboten og dens støtte for dem.
Kontroller HTML og svarheader samlet
Google dokumenterer regler i robots-metataggen og HTTP-svarheaderen. Headeren heter X-Robots-Tag og kan også brukes for filer uten HTML. Søkeroboten må kunne nå siden for å lese instruksjonen som leveres.
Oppdag innstillinger arvet fra malen
I et oppdiktet prosjekt blir noindex ved en feil stående i malen når en forhåndsvisning blir en offentlig tjenesteside. Teamet må kontrollere regelen som faktisk leveres, og dens virkeområde. En innstilling i redaksjonsskjemaet beviser ikke alene hva serveren sender. Reglene i robots.txt styrer derimot hentingen; de to mekanismene må skilles fra hverandre. En instruksjon om visning i søk gir heller ikke tilgangskontroll for fortrolig innhold.
Kilder
Beslektede begreper
- NoindexNoindex styrer indeksering hos søkemotorer som støtter instruksjonen. Søkeroboten må kunne lese den; den erstatter ikke tilgangsbeskyttelse.
- IndekseringsstatusIndekseringsstatus beskriver om en URL er tatt inn i en søkeindeks. Det skiller seg fra tilgang til siden og synlighet ved et bestemt søk.
- GjennomsøkingsbudsjettGjennomsøkingsbudsjettet beskriver hvilke URL-er Google kan og vil hente. Serverkapasitet og behovet for gjennomsøking virker sammen.
- HreflangHreflang markerer tilhørende språk- eller regionversjoner av en side for søkemotorer.
- Kanonisk URLEn kanonisk URL er den foretrukne adressen for likt eller svært lignende innhold; søkemotorer vurderer flere signaler ved valget.
- Teknisk SEOTeknisk SEO legger tekniske forutsetninger for at søkemotorer kan hente, forstå og indeksere egnede sider.
Artikler om temaet
Digital markedsføring med ASES
SEO, GEO, annonser og analyse