Robots.txt ile bot erişimini kısıtlayın

Arama motoru botları, sitenizdeki gördüğü her linki takip eder ve indeskler. Bunlara sizin görünmesini istemediğiniz veya indesklenmesine gerek olmayan sayfalarda dahildir. Bu durum sitenizde bir güvenlik açığı oluşturabileceği gibi SEO açısından da sayfalarınızın değerini düşürecektir.

Bu durumu engellemek için robots.txt dosyasında düzenleme yapacağız.

WordPress, arama motorları için sanal bir robots.txt dosyası oluşturur. Sanal diyorum, çünkü aslında dizininizde bu isimde bir dosya bulunmamasına rağmen site adresinizin sonuna /robots.txt yazıp erişmeye çalıştığınızda aşağıdaki satırları görürsünüz:

User-agent: *
Disallow:

WordPress’in kendi içerisinde yer alan bu ayarları düzenlemek için bir eklentiden faydalanacağız.
Eklentinin adı KB Robots.txt.

Buraya tıklayıp eklentiyi indirin ve WordPress blogunuza kurun.
Eklentiyi etkinleştirdikten sonra yönetim panelinizden Ayarlar > KB Robots.txt bölümünde eklenti sayfasını görebilirsiniz.

Buradaki editöre gerekli düzenlmelerinizi yazıp kaydederek robots.txt dosyanızı düzenleyebilirsiniz.

Google’ın robots.txt dosyası hakkındaki açıklamasını buradaki sayfadan okuyabilirsiniz.

WPDestek için kullandığım robots.txt dosyasına ulaşmak için tıklayın.

Bir önceki yazımız olan WordPress'e gelişmiş arama özellikleri ekleyin başlıklı makalemizde arama sonuçları, gelişmiş arama özelliği ve wordpress arama özelliği hakkında bilgiler verilmektedir.

Yazı Etiketleri: ,

Tufan Tunç

Arayüz tasarım ve geliştirmesi yapıyor. Reklam görselleri ve animasyonları hazırlıyor. Bilgisayar Programcılığı mezunu ve WPDestek yazarı.

İlginizi çekebilecek diğer WordPress yazıları:

  1. WordPress’e gelişmiş arama özellikleri ekleyin
  2. WordPress İçin SEO Araçları
jant 21 Şubat 2012, 19:30

gerekten gerekli bir eklenti ben ekledim ve gayet memnunum Tsk ederimm
saygilarimla

Cevapla

YORUM YAP

Daha fazla Eklentiler
2010′un En İyi WordPress Eklentileri Sence Hangisi?
Kapat