SEO ve Web AraçlarıSite Mimarisi

Robots.txt Oluşturucu

Googlebot ve diğer arama motoru botlarını yönlendirmek için kurallara uygun robots.txt oluşturun.

Oluşturulan robots.txt
User-agent: *
Allow: /
Disallow: /admin/
Disallow: /api/
Disallow: /tmp/

Sitemap: https://dgntool.com/sitemap.xml

Genel Bakış

Web sitenizin tarama talimatlarını kolayca belirleyin. Yönetim paneli gibi gizli dizinleri engelleyin ve XML site haritası bağlantınızı ekleyin.

%100 Gizli: Tüm işlemler tarayıcınızda gerçekleşir. Dosyalarınız hiçbir sunucuya iletilmez.

Robots.txt Oluşturucu: Arama Motoru Bot Yönlendirme

Robots.txt Oluşturucu; Googlebot, Bingbot ve yapay zeka botlarının sitenizin hangi bölümlerini tarayabileceğini ve hangi gizli klasörleri atlaması gerektiğini belirleyen temiz robots.txt dosyaları üretir.

Robots.txt Dosyası Nasıl Oluşturulur?

Hızlı & Kolay
1

Bot Kurallarını Belirleyin

Tüm botlar veya özel botlar için izinleri ayarlayın.

2

Engellenecek Dizinleri Yazın

`/admin/`, `/api/` gibi taranmasını istemediğiniz yolları ekleyin.

3

Sitemap Linkinizi Ekleyip İndirin

Dosyayı oluşturup sitenizin ana dizinine yükleyin.

Öne Çıkan Özellikler ve Avantajlar

%100 İstemci Taraflı Gizlilik

Verileriniz hiçbir sunucuya yüklenmez, doğrudan tarayıcınızın belleğinde güvenle işlenir.

Sıfır Gecikme ve Işık Hızı

Ağ yükleme ve indirme bekleme süreleri olmadan anında gerçek zamanlı sonuç.

Sınırsız ve Tamamen Ücretsiz

Kayıt, kredi kartı veya kullanım kotası yok. Dilediğiniz kadar ücretsiz kullanın.

Tüm Cihazlarla Tam Uyumlu

Masaüstü, tablet ve akıllı telefonlarda kesintisiz çalışan modern kullanıcı deneyimi.

Modern Tarayıcı İçi İşlem Mimarisi

Tüm veri manipülasyonu W3C standartlarında istemci donanım hızlandırmasıyla çalıştırılır.

Uzman İpuçları ve En İyi Pratikler
  • Arama bütçenizi (crawl budget) korumak için sonsuz filtre ve iç arama sayfalarını robots.txt ile engelleyin.

Sıkça Sorulan Sorular

1 Soru & Cevap

Robots.txt dosyası sitenin neresine yüklenmelidir?

Mutlaka sitenizin kök dizinine (root) yüklenmelidir (Örn: `site.com/robots.txt`).

İlgili Araçlar