Robots.txt Nedir?
İngilizcesi: Robots Exclusion Protocol
Tanım
Sitenin kök dizininde bulunan ve tarayıcı botlara hangi bölümlere erişebileceklerini bildiren metin dosyası. Yapay zeka motorlarında görünürlük için GPTBot, ClaudeBot ve PerplexityBot gibi botlara açıkça izin verilmesi gerekir.
İlişkili Terimler
Robots.txt konusunda destek alın
Bu kavramın projenizde nasıl uygulanacağını ücretsiz ön görüşmede netleştirelim. Türkiye geneli ve yurt dışı projelerde uzaktan çalışıyoruz.