OpenAI farklı amaçlar için farklı tarayıcılar kullanır. GPTBot eğitim içindir. OAI-SearchBot, ChatGPT'nin arama özelliklerinde siteleri göstermek içindir. ChatGPT-User ise bir kullanıcı ChatGPT'den bir sayfayı açmasını istediğinde devreye girer; kullanıcı tarafından başlatıldığı için robots.txt kuralları ona uygulanmayabilir.
Bu ayrım önemli bir seçenek sunar: içeriğinizin model eğitiminde kullanılmasını istemiyorsanız GPTBot'u engelleyip OAI-SearchBot'a izin vererek ChatGPT aramasında kaynak olmaya devam edebilirsiniz. İkisini birden engellemek ise ChatGPT aramasında görünmemek anlamına gelir.
Hangi seçeneğin doğru olduğu işinize bağlıdır. İçeriği satış ürünü olan bir yayıncı ile müşteri bulmak isteyen bir hizmet işletmesinin kararı farklı olabilir. Çoğu hizmet işletmesi için görünürlük, eğitime katkı kaygısından daha değerlidir.
Sitenizde nasıl kontrol edilir?
- robots.txt dosyanızda GPTBot, OAI-SearchBot ve ChatGPT-User için ayrı kurallar olup olmadığına bakın.
- Güvenlik duvarı veya CDN ayarlarınızın yapay zekâ tarayıcılarını farkında olmadan engellemediğini kontrol edin.
- Sunucu günlüklerinde bu tarayıcıların isteklerini görün.
Ayrıntı ve uygulama: Sitemi yapay zekâ botlarına kapatmalı mıyım
İlgili terimler
- OAI-SearchBotOAI-SearchBot, OpenAI'ın siteleri ChatGPT'nin arama özelliklerinde göstermek için kullandığı tarayıcıdır. OpenAI'a göre OAI-SearchBot'u robots.txt ile engelleyen siteler ChatGPT arama yanıtlarında gösterilmez.
- Google-ExtendedGoogle-Extended, site sahiplerinin Google'ın taradığı içeriğin Gemini modellerinin eğitiminde ve Gemini uygulamaları ile Vertex AI'daki grounding işleminde kullanılıp kullanılmayacağını robots.txt üzerinden yönetmesini sağlayan belirteçtir. Google Arama'yı ve yapay zekâ özetlerini etkilemez.
- robots.txtrobots.txt, sitenin kök dizininde duran ve tarayıcılara hangi adresleri tarayıp hangilerini taramayacaklarını söyleyen düz metin dosyasıdır. Taramayı kontrol eder, dizine eklemeyi değil; bir sayfayı Google'dan gizlemek için kullanılmaz.
- LLMLLM (büyük dil modeli), çok büyük miktarda metin üzerinde eğitilerek bir metnin devamını tahmin etmeyi öğrenen ve bu sayede soru cevaplama, özetleme ve metin üretme yapabilen yapay zekâ modelidir. ChatGPT'nin GPT modelleri, Google'ın Gemini'si ve Anthropic'in Claude'u bu türdendir.
Sözlüğün tamamı (70 terim) · Sitenizi kontrol edin: web sitesi kontrol aracı