ChatGPT Search, Perplexity ve Gemini sitenize her gün istek atıyor. Çoğu site ya engelli ya da okunaksız. robots.txt konfigürasyonu, llms.txt, doğru JSON-LD ve RAG-ready içerik yapısıyla sitenizi AI yanıtlarında alıntılanabilir hale getiriyoruz.
GPTBot, OAI-SearchBot, anthropic-ai, PerplexityBot, YouBot — her botun amacı farklı. Eğitim verisi toplayan ile canlı arama yapan botu aynı kuralla yönetmek crawl bütçenizi ve hukuki pozisyonunuzu riske atar. Her bot için ayrı kural seti yazıyoruz.
User-agent: GPTBot Allow: /blog/ Allow: /hizmetler/ Disallow: /admin/ User-agent: OAI-SearchBot Allow: /
llms.txt, AI agent'larına sitenizin haritasını ve semantik özetini verir. Hangi sayfanın ne anlama geldiğini, hangi kaynağa atıf yapılabileceğini makineye okunabilir formatta tanımlar. robots.txt'in AI çağı karşılığıdır.
RAG sistemleri entity extraction yapar. Organization, LocalBusiness, Service, FAQ ve Review şemalarınız yoksa ya da yanlışsa AI sizi bir entity olarak tanımıyor — rakibinizi tanıyor. Sayfa niyetine özel şema yazıyoruz.
LLM'ler chunk'lar halinde okur. Uzun paragraflar yerine kısa, öz, atıflanabilir bloklar — hizmet tanımları, SSS yapıları, sosyal kanıt parçaları. Retrieve edilebilir içerik olmadan şema da boşa gider.
# Canlı arama — izin ver User-agent: OAI-SearchBot Allow: / # Eğitim verisi — kısıtlı User-agent: GPTBot Allow: /blog/ Disallow: / # Anthropic User-agent: anthropic-ai Allow: /
# RankMate > GEO ve AI görünürlük ajansı > URL: https://rankmate.agency/ ## Hizmetler > GEO + SEO Büyüme paketi > URL: /hizmetler/geo-seo/ > WhatsApp AI Satış Asistanı > URL: /hizmetler/whatsapp-ai/
{
"@type": "ProfessionalService",
"name": "RankMate",
"knowsAbout": [
"GEO", "AI SEO",
"LLM Visibility"
],
"areaServed": "TR"
}Teknik skor; bot erişim izinleri, llms.txt varlığı, şema kapsama alanı, sayfa yük hızı ve RAG içerik yoğunluğu sinyallerinin ağırlıklı ortalamasıdır.
Server log'larında GPTBot veya OAI-SearchBot isteği yoksa ya 403/404 dönüyor ya da robots.txt tamamen bloke ediyor. Ücretsiz audit ile 5 dakikada tespit ediyoruz.
Henüz resmi bir W3C standardı değil; ancak Anthropic, OpenAI ve Perplexity dahil büyük AI şirketleri aktif olarak okuyor. Olmayan site, haritasız şehir gibi — AI nereye bakacağını bilmiyor.
Evet. Mevcut SEO kurallarınıza dokunmadan, yalnızca AI crawler bloklarını ve llms.txt'i ekleriz. Önce staging ortamında test ederiz.
Schema gerekli ama tek başına yeterli değil. Hatalı, eksik veya kopyalanan şema aktif zarar verir. Üstüne llms.txt ve RAG-ready içerik katmanı yoksa AI sizi entity olarak tanımıyor.