Robotsdirektiv
Robotsdirektiver giver søgemaskiner regler for indeksering eller visning, hvis de understøtter dem. Crawleren og leveringsvejen har også betydning.
Et robotsdirektiv er en instruktion til søgemaskiners crawlere, eksempelvis om indeksering af en side eller visning af uddrag i søgeresultater. Hvilke regler der gælder, afhænger af den adresserede crawler og dens understøttelse.
Kontrollér HTML og svarheader samlet
Google dokumenterer regler i robots-metatagget og HTTP-svarheaderen. Headeren hedder X-Robots-Tag og kan også bruges til filer uden HTML. Crawleren skal kunne nå siden for at læse den leverede instruktion.
Opdag indstillinger arvet fra skabelonen
I et fiktivt projekt bliver noindex ved en fejl stående i skabelonen, når en forhåndsvisning bliver til en offentlig serviceside. Teamet skal kontrollere den faktisk leverede regel og dens anvendelsesområde. En indstilling i redaktionsformularen beviser ikke i sig selv, hvad serveren sender. Reglerne i robots.txt styrer derimod hentningen; de to mekanismer skal skelnes fra hinanden. En instruktion om visning i søgning giver heller ikke adgangskontrol til fortroligt indhold.
Kilder
Relaterede begreber
- NoindexNoindex styrer indeksering hos søgemaskiner, der understøtter instruktionen. Crawleren skal kunne læse den; den erstatter ikke adgangsbeskyttelse.
- IndekseringsstatusIndekseringsstatus beskriver en URL’s optagelse i et søgeindeks. Den adskiller sig fra adgang til siden og synlighed ved en bestemt søgning.
- CrawlbudgetCrawlbudgettet beskriver, hvilke URL’er Google kan og ønsker at hente. Serverkapacitet og efterspørgsel efter crawling virker sammen.
- HreflangHreflang markerer sammenhørende sprog- eller regionsversioner af en side for søgemaskiner.
- Kanonisk URLEn kanonisk URL er den foretrukne adresse for ens eller meget lignende indhold; søgemaskiner vurderer flere signaler ved valget.
- Teknisk SEOTeknisk SEO skaber tekniske forudsætninger for, at søgemaskiner kan hente, forstå og indeksere relevante sider.
Artikler om emnet
Onlinemarkedsføring med ASES
SEO, GEO, annoncer og analytics