Hangi URL'leri göndermemelisiniz?

Her sayfanın dizine eklenmesi mantıklı değildir. Bir URL teknik olarak sorunluysa, arama motorlarından engellenmişse veya kullanıcıya hiçbir değer sağlamıyorsa, arama motoru tarayıcısı onu göz ardı edebilir ve bazı durumlarda bu, arama motorunun gözünde sitenin genel kalitesini olumsuz etkileyebilir.

Bu nedenle, URL'leri toplu olarak göndermeden önce, sayfaların gerçekten indekslenmeye hazır olduğundan ve arama motorlarında kullanışlı olabileceğinden emin olmak önerilir.

Aşağıdakilerin gönderilmesi önerilmez:

• robots.txt dosyasında sayfalar kapatıldı;

• noindex meta etiketi içeren URL;

• 4xx veya 5xx hataları içeren sayfalar;

• Bozuk veya mevcut olmayan URL'ler;

• İçeriksiz boş sayfalar;

• Kopyalar ve neredeyse aynı sayfalar;

• Otomatik olarak oluşturulan gereksiz sayfalar;

• geçici, test veya teknik URL'ler;

• Yetkilendirme sayfaları, alışveriş sepeti, kişisel hesaplar;

• Özel veya gizli bilgiler içeren URL;

• Arama sonuçlarında görünmemesi gereken sayfalar.

Ayrıca, düşük kaliteli SEO sayfalarının, giriş sayfalarının ve kullanıcılara gerçek bir değer sağlamayan otomatik olarak oluşturulmuş içeriklerin toplu olarak gönderilmesinden kaçınmakta fayda var. Arama motorları bu tür sayfaları belirlemede giderek daha yetenekli hale geliyor ve bunları basitçe görmezden gelebilir veya site indekslemelerini sınırlayabilir.

URL'nin teknik durumuna özellikle dikkat edin. Büyük listeleri yüklemeden önce şunları kontrol etmeniz önerilir:

• HTTP durumlarının doğruluğu;

• Döngüsel yönlendirmelerin yokluğu;

• Arama botları için sayfa erişilebilirliği;

• Kanonik olanın varlığı;

• Kazara oluşan indeks eksikliği;

• sunucu yanıt hızı;

• İçeriğin özgünlüğü;

• Doğru iç bağlantı.

URL listesi ne kadar temiz ve kaliteli olursa, başarılı ve hızlı indeksleme olasılığı da o kadar yüksek olur.

Özetle: indeksleme hizmetleri, gerçekten faydalı, erişilebilir ve arama motorları tarafından taranmaya hazır sayfalar için en iyi şekilde kullanılır. Teknik gereksiz bilgiler, yinelenen içerikler ve kapalı URL'ler göndermek genellikle hiçbir fayda sağlamaz ve yalnızca arama motorlarının tarama bütçesini boşa harcar.