Robotsdirektiv
Robotsdirektiv ger sökmotorer regler för indexering eller visning, om de stöder dem. Även sökroboten och leveransvägen spelar roll.
Ett robotsdirektiv är en instruktion till sökmotorernas sökrobotar, exempelvis om indexering av en sida eller visning av utdrag i sökresultat. Vilka regler som gäller beror på vilken sökrobot som avses och dess stöd för reglerna.
Kontrollera HTML och svarshuvud tillsammans
Google dokumenterar regler i robots-metataggen och HTTP-svarshuvudet. Svarshuvudet heter X-Robots-Tag och kan även användas för filer utan HTML. Sökroboten måste kunna nå sidan för att läsa den levererade instruktionen.
Upptäck inställningar som ärvts från mallen
I ett fiktivt projekt blir noindex av misstag kvar i mallen när en förhandsvisning blir en offentlig tjänstesida. Teamet behöver kontrollera den regel som faktiskt levereras och dess omfattning. En inställning i redaktionsformuläret bevisar inte i sig vad servern skickar. Reglerna i robots.txt styr däremot hämtningen; mekanismerna behöver skiljas åt. En instruktion om visning i sökresultat ger inte heller åtkomstkontroll för konfidentiellt innehåll.
Källor
Relaterade begrepp
- NoindexNoindex styr indexering hos sökmotorer som stöder anvisningen. Sökroboten måste kunna läsa den; den ersätter inte åtkomstskydd.
- IndexeringsstatusIndexeringsstatus beskriver om en URL finns i ett sökindex. Den skiljer sig från åtkomst till sidan och synlighet vid en viss sökning.
- GenomsökningsbudgetGenomsökningsbudgeten beskriver vilka URL:er Google kan och vill hämta. Serverkapacitet och behovet av genomsökning samverkar.
- HreflangHreflang markerar sammanhörande språk- eller regionversioner av en sida för sökmotorer.
- Kanonisk URLEn kanonisk URL är den föredragna adressen för samma eller mycket liknande innehåll; sökmotorer väger flera signaler vid valet.
- Teknisk SEOTeknisk SEO skapar tekniska förutsättningar för att sökmotorer ska kunna hämta, förstå och indexera lämpliga sidor.
Artiklar om ämnet
Digital marknadsföring med ASES
SEO, GEO, annonser och analys