robots.txt Nedir? Nasıl Olmalı? Örnekler

robots.txt dosyası genellikle aşağıdaki gibi kullanılır;

User-Agent: *
Allow : /

Wordpress için ise aşağıdaki gibi kullanılır;

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Bu cevap yeterince yardımcı oldu mu?

 Bu dökümanı yazdır

Daha Fazlası

Web Siteyi www Şeklinde Yönlendirme

Eğer web sitenizin www açılmasını istiyor iseniz aşağıdaki kuralı .htaccess dosyası içerisine...

Http den Https SSL Yönlendirme

http linkleri https olarak yönlendirmek için aşağıdaki kodu .htaccess e ekleyerek...

http'den https'ye Yönlendirme Ve www Yönlendirme

Aşağıdaki kuralı .htaccess dosyanıza ekleyerek web sitenin hem http den https şeklinde...

503 service unavailable ne demek? Çözümü

Bazen sitelerinizde 503 service unavailable hatası görebilirsiniz. Bu hatanın bir çok nedeni...

Alt Klasöre (Dizine) Wordpress Kurma

Diğer wordpress in kurulacağı /altklasör/ altına wordpress dosyalarını yükleyin. Ardından...