OLAB Assist Giriş yap
Site sahipleri için

OLABAssistBot, tarama botumuz

Sunucu kayıtlarınızda OLABAssistBot adını gördüyseniz: bu, OLAB Assist'in tarama botudur. Bir web sitesinin arama motorları ve yapay zeka asistanları tarafından ne kadar iyi bulunabildiğini kontrol etmek için herkese açık sayfaları okur.

Kendini nasıl tanıtır

Her istek şu user agent bilgisini taşır:

OLABAssistBot/2.0 (+https://olabassist.com/bot)

Yapay zeka asistanlarının kaynak gösterdiği sayfaları okurken aynı adı tarayıcı biçimli bir user agent içinde gönderir: Mozilla/5.0 (compatible; OLABAssistBot/2.0 (+https://olabassist.com/bot)).

Ne zaman ziyaret eder

  • Biri ana sayfamızda bir web sitesinin ücretsiz analizini çalıştırdığında.
  • Bir müşteri web sitesini bizimle takip ettiğinde: her gün bir tarama ve müşterinin kendi başlattığı taramalar.
  • Bir Piyasa Fırsat Radarı müşterisi web sitesini rakiplerin web siteleriyle karşılaştırdığında.
  • Bir yapay zeka asistanı, bir müşterinin konusuyla ilgili bir yanıtta bir sayfayı kaynak gösterdiğinde. Bu tür her sayfa günde en fazla bir kez okunur.

Neleri okur

  • Başlangıç sayfası, /robots.txt, /llms.txt ve /sitemap.xml.
  • Takip edilen bir web sitesinde, site haritasından veya ana sayfa bağlantılarından sınırlı sayıda başka sayfa (plana bağlı olarak tarama başına 10 ile 250 arası).
  • Yalnızca herkese açık sayfalar. Hiçbir zaman oturum açmaz, form göndermez ve görsel, PDF veya video indirmez.
  • Bir yanıtı 1,5 MB'tan sonra okumayı bırakır ve her yanıt için en fazla 8 saniye bekler. Bir web sitesinin aynı anda en fazla 10 sayfasını açar.

Yapay zeka arama botlarının erişimini kontrol etme

Analizin bir parçası, yapay zeka arama botlarının bir web sitesine ulaşıp ulaşamadığıdır. Bunun için her analiz, başlangıç sayfasını şu botların her birinin user agent bilgisiyle birer kez ister: OAI-SearchBot, PerplexityBot ve Claude-SearchBot. Bu istekler o şirketlerden değil, bizim sunucularımızdan gelir ve yalnızca başlangıç sayfasını okur.

Nasıl durdurulur

OLABAssistBot, bir web sitesinin diğer sayfalarını açarken robots.txt kurallarına uyar. Botu bu sayfalardan uzak tutmak için robots.txt dosyanıza şunu ekleyin:

User-agent: OLABAssistBot
Disallow: /

OLABAssistBot adıyla anılmadığında User-agent: * kuralları uygulanır. Başlangıç sayfası ve yukarıda listelenen dosyalar, analiz tam olarak bunlarla ilgili olduğu için her analizde yine bir kez okunur.

İstekler nereden gelir

Sunucularımız Cloudflare ağında çalışır; bu nedenle istekler Cloudflare adreslerinden gelir.

Sorular

[email protected] adresine yazın.