Robots.txt Generator

Arama motoru botları için robots.txt dosyası oluşturun ve site tarama kurallarını belirleyin

Arama motoru botları için robots.txt dosyası oluşturun ve site tarama kurallarını belirleyin

User-agent

Crawl Delay (saniye)

Disallow (Her satıra bir path)

Botların erişmesini istemediğiniz dizinler

Allow (Her satıra bir path)

Özellikle izin vermek istediğiniz dizinler

Sitemap URL'si