WordPress için ideal robots txt dosyası

Robots.txt dosyaları sitelerin ana sunucusuna eklenerek arama motorları tarafından hangi sayfaların indexlenip indexlenmeyeceğine izin vermemizi sağlar. Bildiğiniz gibi gerek güvenlik gerekse indexlenme açısından bazı dosyaların google ve vb arama motorları tarafından görülmemesi gerekir. WordPress siteleri için en ideal robots.txtdosyasında sitemap yolunuzuda göstermeniz yararınıza olacaktır. Örnek olması açısından kendi sitemin robots.txt dosyası:

WordPress Robots.txt:

User-agent: *
Disallow: /*ref=*
Disallow: /wp-
Disallow: /feed/
Disallow: /trackback/
Disallow: /comments/feed/
Disallow: /comments/

# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://www.siteniz.com/sitemap.xml
Sitemap: http://www.siteniz.com/sitemap.xml.gz
# END XML-SITEMAP-PLUGIN
Reklamlar

Bir Cevap Yazın

Aşağıya bilgilerinizi girin veya oturum açmak için bir simgeye tıklayın:

WordPress.com Logosu

WordPress.com hesabınızı kullanarak yorum yapıyorsunuz. Çıkış  Yap / Değiştir )

Twitter resmi

Twitter hesabınızı kullanarak yorum yapıyorsunuz. Çıkış  Yap / Değiştir )

Facebook fotoğrafı

Facebook hesabınızı kullanarak yorum yapıyorsunuz. Çıkış  Yap / Değiştir )

Google+ fotoğrafı

Google+ hesabınızı kullanarak yorum yapıyorsunuz. Çıkış  Yap / Değiştir )

Connecting to %s

%d blogcu bunu beğendi: