Robots.txt Oluşturucu
Web siteniz için robots.txt dosyası oluşturun. Arama motorlarını kontrol edin ve yapay zeka botlarını engelleyin.
⚠️ URL girin (https://example.com)
🕷️ Kural
Sık engellenen yollar
Site haritaları
📄 robots.txt
💡 Bu dosyayı sitenizin kök dizinine yükleyin: https://yoursite.com/robots.txt
robots.txt hakkında
- • robots.txt, arama motoru tarayıcılarına sitenin hangi bölümlerini isteyebileceklerini bildirir.
- • Dosya yalnızca alan adının kökünde çalışır: https://example.com/robots.txt.
- • Disallow: / tüm siteyi engeller; boş bir Disallow: her şeye izin verir.
- • Buradan engellemek bir adresi arama sonuçlarından kaldırmaz; bunun için noindex ya da parola gerekir.
- • GPTBot ve CCBot gibi yapay zekâ tarayıcıları robots.txt kurallarına gönüllü olarak uyar; dosya bir kilit değil, bir ricadır.
- • Sitemap: satırı, site haritasının tam mutlak adresini içermelidir.
Robots.txt Oluşturucu
Ücretsiz Robots.txt Oluşturucumuz, doğru biçimlendirilmiş bir robots.txt dosyası oluşturmanıza yardımcı olur.
Popüler Araçlar
Robots.txt Oluşturucu Hakkında
Robots.txt Oluşturucu, tarama botlarına yönelik yönerge dosyasını kural kural hazırlar: bir User-agent seçin, Allow ve Disallow yolları ekleyin, ardından bir Crawl-delay ya da bir veya daha fazla Sitemap URL'si belirleyin. Onay kutuları /wp-admin/, /cart/ ve /*.pdf$ gibi sitelerin sıkça engellediği yolları kapsar; hazır ayarlar ise tümüne izin verme, tümünü engelleme, WordPress, e-ticaret ve GPTBot, CCBot, anthropic-ai gibi yapay zekâ botlarını engelleme durumlarını çözer. Dosya tarayıcınızda birleştirilir; kopyalayabilir veya robots.txt olarak indirebilirsiniz.
Kullanım alanları
Nasıl kullanılır
Sitenize uyan bir hazır ayar varsa oradan başlayın: Allow All, Block All, WordPress, Block AI Bots veya E-commerce; sonra oluşan içeriği düzenleyin.
Site URL alanına alan adınızı yazın, örneğin https://example.com; site haritası satırı buradan oluşturulur.
Her kuralda User-Agent açılır listesinden bir tarayıcı botu seçin, ardından /admin/ gibi yolları girmek için + Add Disallow ve + Add Allow düğmelerini kullanın; yeni bot eklemek için + Add User-Agent Rule düğmesine basın.
Common Paths to Block altındaki girdileri işaretleyip Apply to Rule 1 düğmesine basın; bir botu yavaşlatmak isterseniz Crawl Delay değerini saniye cinsinden ayarlayın.
Sitemaps bölümünde Auto-add /sitemap.xml seçeneğini işaretli bırakın veya ek site haritası URL'leri için + Add Sitemap düğmesini kullanın.
Sağdaki robots.txt önizlemesini kontrol edin, ardından Download ya da Copy düğmesine tıklayıp dosyayı alan adınızın kök dizinine yükleyin.
Profesyonel İpuçları
- İçeriğinizi doğrudan yapıştırın — Robots.txt Oluşturucu yaygın girdi kalıplarını algılar ve mantıklı varsayılanları otomatik uygular.
- Robots.txt Oluşturucu içindeki işinizi hızlandırmak için klavye kısayollarını kullanın (tümünü seçmek için Ctrl/Cmd+A, kopyalamak için Ctrl/Cmd+C).
- Çok büyük girdileri parçalara bölün — tarayıcı sekmeleri genellikle megabaytlarca metni kaldırabilir, ancak devasa verilerin ayrıştırılması arayüzü kısa süreliğine dondurabilir.
- Robots.txt Oluşturucu girdilerinizi kaydetmez ve saklamaz. Geçmişe ihtiyacınız varsa önemli çıktıları yerel bir dosyaya ya da not uygulamasına kopyalayın.
- Tarayıcınızdan çıkmadan uçtan uca veri akışları kurmak için Robots.txt Oluşturucuyu sitedeki diğer araçlarla (biçimlendiriciler, dönüştürücüler, kodlayıcılar) birlikte kullanın.
Sık Sorulan Sorular
Evet, tamamen ücretsizdir; üyelik, API anahtarı, filigran ve kullanım sınırı yoktur.
Hayır. Robots.txt Oluşturucu tamamen istemci tarafında, yani tarayıcınızda çalışır. Girdikleriniz sunucularımıza asla ulaşmaz.
Kesin bir sınır yoktur, ancak cihazınızın belleğine bağlı olarak birkaç megabaytı aşan girdilerde yavaşlama görebilirsiniz.
Evet. Robots.txt Oluşturucu ile ürettiğiniz çıktılar size aittir; kişisel veya ticari her projede özgürce kullanabilirsiniz.
Mantığın büyük bölümü istemci tarafındaki JavaScript ile çalışır; bu nedenle sayfa bir kez yüklendikten sonra çoğu zaman ağ bağlantısı olmadan da çalışmaya devam edebilirsiniz.
Yok. Robots.txt Oluşturucu tarayıcınızda çalıştığı için API anahtarı veya kısıtlama olmadan donanımınızın izin verdiği kadar çok girdi işleyebilirsiniz.