robots.txt Oluşturucu
Tarama kurallarınızı ve sitemap adresinizi sade bir robots.txt taslağına dönüştürün.
Yanlış kurallar önemli sayfaların taranmasını engelleyebilir. robots.txt güvenlik veya kesin indeks kaldırma yöntemi değildir. Yayın öncesinde kuralları kontrol edin.
Araç hazırlanıyor…
Sonuçlarınızı bir uzmanla değerlendirin.
Aracı kullanmak tamamen ücretsizdir. Bir sonraki adım için: Tarama Ayarlarını Değerlendirelim.
Nasıl kullanılır?
User-agent seçin, her satıra bir yol yazın; varsa sitemap URL'sini ekleyin. Üretilen dosyayı yayınlamadan önce kontrol edin.
Formül ve çalışma mantığı
Allow ve Disallow tarama yönergeleri oluşturur. Disallow: / seçili bot için sitenin tamamının taranmasını engelleyebilir.
Örnek kullanım
Disallow: /ozel/ bu yolun taranmasını kısıtlamayı amaçlar; içerik erişimini parola gibi korumaz.
Sık sorulan sorular
robots.txt sayfayı kesin indeksten çıkarır mı?
Hayır. Tarama yönetimidir, güvenlik veya kesin indeks kaldırma yöntemi değildir. Noindex okunabilmesi için botun sayfayı tarayabilmesi gerekebilir.
Sonucu görmek için kayıt veya ödeme gerekir mi?
Hayır. Araç ücretsiz çalışır; üyelik veya iletişim bilgisi karşılığında sonuç kilidi yoktur. İşlenen içerik bu tarayıcıda kalır; bağlantı testini açmanız ayrı bir kullanıcı eylemidir.