AIO

ChatGPT Aramasında Görünmek: OAI-SearchBot ve robots.txt

OAI-SearchBot, GPTBot ve ChatGPT-User arasındaki farkı öğrenin; arama görünürlüğü ve model eğitimi tercihlerinizi robots.txt üzerinden ayrı ayrı yönetin.

14 Eylül 20268 dk okumaGüncellendi: 14 Eylül 2026

ChatGPT aramasında bir sitenin kaynak olarak değerlendirilebilmesi için OAI-SearchBot erişimine izin verilmelidir. GPTBot ise model eğitimi amacıyla kullanılan ayrı bir tarayıcıdır ve bağımsız olarak engellenebilir. ChatGPT-User, kullanıcının başlattığı belirli sayfa ziyaretlerinde çalışır; otomatik arama dizini tarayıcısı değildir.

Bu ayrım, “ChatGPT’ye izin ver veya tamamen engelle” biçimindeki tek seçenekli yaklaşımın neden yetersiz kaldığını gösterir. Arama görünürlüğü ile model eğitimi tercihi robots.txt dosyasında ayrı ayrı yönetilebilir.

OpenAI’ın web erişim araçları arasındaki fark nedir?

OpenAI’ın güncel belgesinde üç araç, farklı amaçlarla tanımlanır:

Araç	Amaç	robots.txt tercihi
`OAI-SearchBot`	Web sitelerini ChatGPT arama sonuçlarında gösterebilmek	Arama görünürlüğü için izin verilebilir
`GPTBot`	Üretken yapay zekâ modellerinin geliştirilmesinde kullanılabilecek içeriği taramak	Eğitim tercihinize göre izin verilebilir veya engellenebilir
`ChatGPT-User`	Kullanıcının isteğiyle belirli bir web sayfasını ziyaret etmek	Otomatik tarama yapmaz; robots.txt kuralları kullanıcının başlattığı her istekte uygulanmayabilir

OAI-SearchBot’a izin verip GPTBot’u engellemek mümkündür. Böylece site, ChatGPT arama yanıtlarında kaynak olarak kullanılabilir; buna karşılık içeriklerin model eğitiminde kullanılmaması yönünde tercih bildirilebilir.

Mevcut robots.txt nasıl kontrol edilir?

robots.txt dosyası alan adının kökünde bulunur:

https://ornek.com/robots.txt

Kontrol sırasında şu sorular yanıtlanmalıdır:

Dosya 200 durum koduyla açılıyor mu?
User-agent: * altında bütün siteyi engelleyen Disallow: / kuralı var mı?
OAI-SearchBot veya GPTBot için ayrıca yazılmış kurallar bulunuyor mu?
CDN ya da güvenlik duvarı bot isteğini robots.txt dışında engelliyor mu?
Kritik sayfalar giriş, çerez duvarı veya JavaScript hatası nedeniyle erişilemez durumda mı?

robots.txt yalnızca tarama talimatı verir. Sayfanın kaliteli, güncel veya belirli bir yanıt için uygun olduğunu kanıtlamaz.

OAI-SearchBot erişimi nasıl yönetilir?

Bütün site ChatGPT aramasına açık tutulacaksa şu yapı kullanılabilir:

User-agent: OAI-SearchBot
Allow: /

Belirli bir klasör kapatılacaksa açık ve dar bir kural tercih edilmelidir:

User-agent: OAI-SearchBot
Disallow: /ozel-alan/

OpenAI, OAI-SearchBot erişimini kapatan sitelerin ChatGPT arama yanıtlarında kaynak olarak gösterilmeyeceğini, ancak site bağlantılarının yönlendirme amacıyla yine de görünebileceğini belirtiyor. robots.txt değişikliğinin sistemlere yansıması yaklaşık 24 saat sürebilir. Bu, kaynak belgede belirtilen genel süredir; sitenin kesin olarak ne zaman dizine ekleneceğini göstermez.

GPTBot tercihi bağımsız olarak nasıl belirlenir?

Arama erişimi açık tutulup model eğitimi için yapılan tarama engellenecekse iki bot için ayrı kurallar yazılır:

User-agent: OAI-SearchBot
Allow: /

User-agent: GPTBot
Disallow: /

Her iki kullanıma da izin verilecekse:

User-agent: OAI-SearchBot
Allow: /

User-agent: GPTBot
Allow: /

Kurallar işletmenin içerik politikası ve hukuki değerlendirmesiyle uyumlu olmalıdır. robots.txt değişikliği yapılmadan önce mevcut arama motoru kurallarının yanlışlıkla bozulmadığı kontrol edilmelidir.

CDN ve güvenlik duvarı erişimi neden ayrıca kontrol edilmelidir?

robots.txt dosyasında izin verilmesi, sunucunun isteği kabul edeceği anlamına gelmez. CDN, web uygulama güvenlik duvarı veya bot koruma hizmeti User-Agent bilgisini ya da IP adresini engelleyebilir.

OpenAI, botları için yayımlanmış IP aralıkları sağlar. Teknik kontrol şu sırayla yapılabilir:

Sunucu ve CDN loglarında OAI-SearchBot istekleri aranır.
User-Agent bilgisi ile IP aralığı birlikte doğrulanır.
403, 429 ve 5xx yanıtları incelenir.
Ana sayfa, hizmet sayfası ve önemli blog URL’leri ayrı ayrı test edilir.
Güvenlik kuralı değiştirildiyse loglar yeniden izlenir.

Yalnızca User-Agent bilgisine güvenmek doğru değildir; bu bilgi taklit edilebilir. İstek, resmi IP listesiyle de doğrulanmalıdır.

llms.txt ne yapar, neyi garanti etmez?

llms.txt, bazı site sahiplerinin içerik ve önemli bağlantıları makine tarafından okunabilir bir metin dosyasında özetlemek için kullandığı gelişmekte olan bir yaklaşımdır. Ancak OpenAI’ın arama görünürlüğü kontrolü resmi olarak OAI-SearchBot ve robots.txt üzerinden açıklanır.

Google da llms.txt dosyasını kendi Arama ve üretken AI özelliklerinde görünürlük sağlamak için kullanmadığını belirtiyor. Bu nedenle dosyanın bulunması, ChatGPT veya Google AI yanıtlarında görünmeyi garanti etmez.

Bir sitede llms.txt kullanılıyorsa şu sınırlar korunmalıdır:

Dosya güncel ve gerçek sayfalara bağlantı vermelidir.
Gizli veya sayfada görünmeyen iddialar eklenmemelidir.
robots.txt, dizine eklenebilirliğin ve nitelikli içerik çalışmalarının yerine geçirilmemelidir.
Platformun resmi desteği yoksa etkisi doğrulanmış gibi sunulmamalıdır.

Değişiklik sonrası hangi kontroller yapılmalıdır?

Yapılandırma değişikliğinden sonra yalnızca robots.txt dosyasının açılması yeterli değildir. Şu kontroller kayda alınabilir:

Kontrol	Beklenen sonuç
robots.txt yanıtı	Dosya erişilebilir ve sözdizimi geçerli
OAI-SearchBot kuralı	İşletmenin arama tercihine uygun
GPTBot kuralı	Eğitim tercihine uygun
Sunucu/CDN logları	İzin verilen istekler engellenmiyor
Kritik URL testi	Sayfa başarılı yanıt veriyor ve ana içerik görülebiliyor
Değişiklik kaydı	Tarih, kural ve sorumlu kişi belirtilmiş

Tarama izni verilmesi, sayfanın hemen kaynak gösterileceği anlamına gelmez. İçerik kalitesi, sorguyla ilişki ve sistemlerin yeniden değerlendirme süresi sonucu etkiler.

Sık Sorulan Sorular

GPTBot’u engellersem ChatGPT aramasından tamamen çıkar mıyım? OpenAI’ın belgesine göre arama görünürlüğü OAI-SearchBot ile yönetilir. GPTBot’u engelleyip OAI-SearchBot’a izin vermek mümkündür.

OAI-SearchBot’a izin vermek kaynak gösterilme garantisi verir mi? Hayır. İzin yalnızca tarama ve değerlendirme için gerekli teknik erişimi sağlar; belirli bir yanıtta görüneceğiniz anlamına gelmez.

ChatGPT-User robots.txt kurallarına uyar mı? ChatGPT-User, kullanıcının başlattığı sayfa ziyaretleri için kullanılır. OpenAI, bu tür isteklerde robots.txt kurallarının her zaman uygulanmayabileceğini belirtiyor.

Googlebot ayarları OAI-SearchBot’u da etkiler mi? Genel User-agent: * kuralları OAI-SearchBot’u etkileyebilir; ancak Googlebot’a özel kurallar bu bot için geçerli değildir. Her botun kuralları ayrı ayrı kontrol edilmelidir.

robots.txt ile sayfayı arama sonuçlarından kaldırabilir miyim? robots.txt taramayı yönetir; URL’nin dizinden kaldırılmasını garanti etmez. Arama motoruna göre noindex veya kaldırma araçları gibi farklı yöntemler gerekebilir.

Tarama tercihini açık bir politikaya dönüştürmek

Arama sonuçlarında görünmek ile içeriğin model eğitiminde kullanılmasına izin vermek iki ayrı tercihtir. İşletme bu konudaki kararını verdikten sonra robots.txt kuralları, CDN güvenliği ve sunucu kayıtları birlikte kontrol edilmelidir.

ChatGPT ve diğer yanıt sistemleri için teknik erişimi ve içerik kapsamını birlikte değerlendirmek isterseniz AIO hizmetimize göz atabilirsiniz. Konuya yeni başlıyorsanız önce KOBİ’ler için AIO rehberini okuyabilirsiniz.