+90 850 840 83 05
    Destek TalebiÖğrenci İndirimiKampanyalarWiki
    N8N ile otomatik iş akışları oluşturun!•Yıllık alımlarda ücretsiz .com.tr alan adı•Sanal Sunucu paketleri ₺149.90'dan başlayan fiyatlarla•Hosting paketlerinde ücretsiz SSL sertifikası•VDS ve Performans sunucularda %10 indirim kodu TANISMA2026•N8N ile otomatik iş akışları oluşturun!•Yıllık alımlarda ücretsiz .com.tr alan adı•Sanal Sunucu paketleri ₺149.90'dan başlayan fiyatlarla•Hosting paketlerinde ücretsiz SSL sertifikası•VDS ve Performans sunucularda %10 indirim kodu TANISMA2026•

    Robots.txt Üretici

    Arama motoru botlarını yönetmek için doğru biçimli bir robots.txt dosyası oluşturun.

    Tarayıcıda çalışır, veri gönderilmez Ücretsiz · Kayıt gerekmez

    Tüm botlara izin ver

    Kapatırsanız tüm site taramaya kapatılır (Disallow: /)

    User-agent: *
Disallow: /wp-admin/
Disallow: /cgi-bin/
Disallow: /panel/

Sitemap: https://clou.tr/sitemap.xml

    robots.txt nasıl çalışır?

    Arama motoru botları bir siteyi taramadan önce robots.txt dosyasını okur ve buradaki direktiflere uyar. Doğru yapılandırılmış bir robots.txt, tarama bütçenizi (crawl budget) önemli sayfalara yönlendirir ve gereksiz/özel sayfaların indekslenmesini engeller.

    • Disallow: Belirtilen yolun taranmasını engeller
    • Sitemap: XML site haritanızın adresini bildirir (önerilir)
    • Crawl-delay: Botların istekler arası bekleyeceği saniye

    Site haritanızı oluşturmak için sitemap.xml üreticimizi kullanabilirsiniz.

    Sıkça Sorulan Sorular

    robots.txt, sitenizin kök dizinine (example.com/robots.txt) konulan ve arama motoru botlarına hangi sayfaları tarayabileceklerini bildiren bir metin dosyasıdır. Yönetim paneli, sepet veya arama sonuç sayfaları gibi indekslenmesini istemediğiniz bölümleri buradan yönetebilirsiniz.

    Hayır. robots.txt bir güvenlik veya gizlilik aracı değildir; yalnızca iyi niyetli botlara yol gösterir. Disallow ile engellenen bir sayfa yine de başka sitelerden link alıyorsa arama sonuçlarında görünebilir. Bir sayfayı tamamen indeksten çıkarmak için 'noindex' meta etiketi kullanılmalıdır.

    Evet, önerilir. robots.txt içine 'Sitemap: https://siteniz.com/sitemap.xml' satırını eklemek, arama motorlarının site haritanızı kolayca bulmasını sağlar ve sayfalarınızın daha hızlı keşfedilmesine yardımcı olur.

    Crawl-delay, botların istekler arasında bekleyeceği süreyi (saniye) belirtir ve sunucu yükünü azaltmaya yarar. Ancak Google bu direktifi yok sayar; Bing ve Yandex gibi bazı motorlar destekler. Sunucu kaynaklarınız sınırlıysa düşük bir değer faydalı olabilir.

    İlgili Araçlar

    SEO URL (Slug) Üretici

    Türkçe karakterleri dönüştürerek başlıklarınızdan temiz, SEO uyumlu URL'ler oluşturun.

    Meta Etiket Üretici

    Title, description ve Open Graph etiketlerinizi oluşturun, Google'da nasıl görüneceğini önizleyin.

    Sitemap.xml Üretici

    URL listenizden Google'a gönderebileceğiniz geçerli bir sitemap.xml dosyası oluşturun.

    Tüm Araçları Gör

    Hızlı, güvenli ve Türkiye merkezli hosting

    NVMe SSD, ücretsiz SSL ve %99.9 uptime garantisi ile web sitenizi Clou.TR'ye taşıyın.

    Hosting Paketlerini GörSunucu Çözümleri