# robots.txt: AdPix (adpix.com.tr) # Sitenin kamuya açık içeriği taramaya açıktır (karar 44: "evet, kontrollü"). # Yönetim paneli, form kayıtları ve gizli uç noktalar bu dosyayla değil, kimlik doğrulama ve yetkilendirmeyle korunur. # Bu dosyaya yalnızca kurallara uyan tarayıcılar uyar; kurala uymayan ya da aşırı yük bindiren tarayıcılar sunucu ve CDN ayarlarıyla engellenmelidir. # 1. Genel kural: arama motorları (Googlebot, Bingbot ve ötekiler) ve adıyla anılmayan bütün tarayıcılar. # Google'ın yapay zekâ özetleri (AI Overviews, AI Mode) Googlebot kurallarına bağlıdır; bu grup kapanırsa Google aramasından da çıkılır. User-agent: * Allow: / # 2. Yapay zekâ arama ve yanıt tarayıcıları: sayfayı arama sonucunda ya da yanıtta kaynak olarak gösterir. # Model eğitimi izni bu gruptan bağımsızdır ve 3. grupta durur (Applebot için eğitim denetimi Applebot-Extended'dır). # ChatGPT-User, Claude-User, Perplexity-User, Amzn-User ve MistralAI-User kullanıcının isteğiyle sayfa açar; # sağlayıcıları, kullanıcı isteğiyle yapılan bu ziyaretlerde robots.txt kurallarının her zaman uygulanmayabileceğini belirtir. # Bu grubu kapatmak için "Allow: /" satırını "Disallow: /" yapın. Genel gruba bir kısıt eklenirse bu gruba da yazılmalıdır. User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: Claude-SearchBot User-agent: Claude-User User-agent: PerplexityBot User-agent: Perplexity-User User-agent: DuckAssistBot User-agent: Applebot User-agent: meta-webindexer User-agent: Amzn-SearchBot User-agent: Amzn-User User-agent: MistralAI-Index User-agent: MistralAI-User Allow: / # 3. Yapay zekâ model eğitimi tarayıcıları ve eğitim denetim belirteçleri: içerik model eğitiminde kullanılabilir. # Google-Extended ve Applebot-Extended ayrı tarama yapmaz; Googlebot ve Applebot'un topladığı verinin eğitimde kullanılıp kullanılmayacağını belirler. # CCBot, Common Crawl'un herkese açık tarama arşivini toplar; Amazonbot'un verisi Amazon'un yapay zekâ modellerinin eğitiminde kullanılabilir. # Bu grubu kapatmak arama sonuçlarındaki görünürlüğü etkilemez; kapatmak için "Allow: /" satırını "Disallow: /" yapın. # Genel gruba bir kısıt eklenirse bu gruba da yazılmalıdır. User-agent: GPTBot User-agent: ClaudeBot User-agent: Google-Extended User-agent: Applebot-Extended User-agent: CCBot User-agent: meta-externalagent User-agent: Amazonbot User-agent: MistralAI-Training Allow: / Sitemap: https://adpix.com.tr/sitemap.xml