Robots yönergesi
Robots yönergeleri, destekleyen arama motorlarına indeksleme veya gösterim kuralları verir. Hedeflenen tarama botu ve yönergenin iletilme yolu da önemlidir.
Robots yönergesi, arama motoru tarama botlarına verilen bir talimattır; örneğin sayfanın indekslenmesi veya arama sonucu özetlerinin gösterimiyle ilgilidir. Hangi kuralların geçerli olduğu, hedeflenen bota ve onun desteğine bağlıdır.
HTML ile yanıt başlığını birlikte kontrol edin
Google, robots meta etiketindeki ve HTTP yanıt başlığındaki kuralları belgeler. X-Robots-Tag adlı başlık, HTML içermeyen dosyalarda da kullanılabilir. Botun sunulan talimatı okuyabilmesi için sayfaya ulaşabilmesi gerekir.
Şablondan taşınan ayarları bulun
Kurgusal projede, önizlemeden herkese açık hizmet sayfasına geçilirken şablonda yanlışlıkla noindex kalır. Ekip, gerçekten sunulan kuralı ve kapsamını kontrol etmelidir. Editör formundaki ayar, sunucunun ne gönderdiğini tek başına kanıtlamaz. Buna karşılık robots.txt kuralları içeriğin alınmasını yönetir; iki mekanizma ayrılmalıdır. Arama görünümüne ilişkin bir talimat, gizli içerikler için erişim kontrolü de sağlamaz.
Kaynaklar
İlgili terimler
- NoindexNoindex, yönergeyi destekleyen arama motorlarında dizine alınmayı yönetir. Tarama botu yönergeyi okuyabilmelidir; bu bir erişim koruması değildir.
- İndekslenme durumuİndekslenme durumu, URL’nin arama dizinine alınmasını açıklar. Sayfanın açılabilmesi ve belirli bir aramada görünmesi ayrı durumlardır.
- Tarama bütçesiTarama bütçesi, Google’ın hangi URL’leri alabileceğini ve almak istediğini açıklar. Sunucu kapasitesi ile tarama talebi birlikte etkili olur.
- HreflangHreflang, bir sayfanın birbiriyle ilişkili dil veya bölge sürümlerini arama motorları için işaretler.
- Canonical URLCanonical URL, aynı veya çok benzer içerikler için tercih edilen adrestir; arama motorları bunun için birden fazla sinyali değerlendirir.
- Teknik SEOTeknik SEO, arama motorlarının uygun sayfaları alması, anlaması ve dizine eklemesi için teknik koşulları düzenler.
Bu konudaki yazılar
ASES ile Dijital pazarlama
SEO, GEO, reklam ve analiz