Briefing · Yapay zekâ tarayıcıları

Cloudflare, 1 Temmuz 2026'dan beri yapay zekâ ziyaretçilerini üçe ayırıyor. Siteniz hangilerini alıyor?

Web sitelerini sunmak ve korumak için önlerinde duran Cloudflare, 1 Temmuz 2026'da tek “Block AI bots” anahtarını Search, Agent ve Training için ayrı ayarlarla değiştirdi. 15 Eylül 2026'da aramada kalırken yapay zekâ eğitimini reddetme ayarı duyurdu. Kendi sitenizin böyle ayarlı olup olmadığı ayrı kontroldür. Hiçbir tarama ayarı da yapay zekânın hakkınızda söylediklerini doğru yapmaz.

Yayımlandı Güncellendi

Temsili örnektir; gerçek bir web sitesi veya Cloudflare hesabı değildir.

Cloudflare, 1 Temmuz 2026

Tek anahtar üç karara dönüştü

Temmuzda Free planı dâhil her Cloudflare müşterisi her yapay zekâ trafik türünü ayrı ayarlayabiliyordu: İzin ver, tüm sayfalarda engelle veya yalnızca reklam gösteren sayfalarda engelle. 15 Eylül'den itibaren Training için dördüncü seçenek var: Disallow AI Training.

  • Search

    Bulunmanıza yardımcı tarayıcılar

    Çoğu işletme için
    Erişilebilir kalmak istiyorsanız izin verin.

    Yapay zekâ araması dâhil arama motorlarının bulup dizine eklemesi için sayfalarınızı okurlar.

  • Agent

    Şu anda bir kişi adına hareket eden asistanlar

    Üzerinde düşünmeye değer
    Engellemek, gerçek müşterinin asistanının görevi bitirmesini durdurabilir.

    Örneğin bir şeyi kontrol etmek veya görevi tamamlamak için müşteri adına ziyaret eden yapay zekâ ajanı.

  • Training

    Yapay zekâ modeli eğitmek için içerik toplayan taramalar

    15 Eylül'den beri
    Cloudflare, yeni Disallow AI Training ayarının aramada kalırken eğitimi reddettiğini söylüyor.

    Model oluşturmak için içeriğinizi alırlar ve size hiçbir şey geri göndermeyebilirler.

15 Eylül'den itibaren yeni sitelere sunulanlar

Cloudflare'ın temmuz değişiklik günlüğü, 15 Eylül 2026'dan itibaren yeni alan adlarında Search izinli kalırken reklamlı sayfalarda Agent ve Training'in varsayılan engelleneceğini söylüyordu.

15 Eylül paylaşımı farklı anlatıyor: Kurulumda yeni alan adına iki önerilen ön ayardan biri sunuluyor; sahibi istediği zaman değiştirebiliyor. Reklamdan gelir kazanan sitede ön ayar, Training'i engellemek yerine Disallow AI Training seçiyor.

Cloudflare, 15 Eylül 2026

Block göründüğünden daha katı

Cloudflare'a göre yeni ayar, aynı tarayıcının içeriğinizi eğitim amacıyla kullanmasına izin vermeden arama için dizinde kalmanızı kolaylaştırıyor. Yalnızca Training'e uygulanıyor.

Disallow AI Training

  • Cloudflare, aramada kalırken yapay zekâ eğitimini reddettiğini söylüyor
  • İkisini de yapan ve Cloudflare'ın Accountable dediği tarayıcılar arama için izinli kalır; buna yalnızca gereklilikleri karşılamayı taahhüt eden işletmeciler de dâhil
  • Eğitim istememe tercihini henüz robots.txt üzerinden Bing'e iletmiyor: Cloudflare, Microsoft desteğinin 2027 başı için hedeflendiğini söylüyor

Block

  • Cloudflare'a göre Block ve Block on pages with ads artık Googlebot, Bingbot ve Applebot gibi hem arama hem eğitim yapan tarayıcıları da durduruyor
  • Bu yüzden Training'i engellemek arama görünürlüğüne de mal olabilir

Bulunmak ama eğitim için kullanılmamak istiyorsanız Cloudflare, Block yerine Disallow AI Training'e işaret ediyor.

Accountable ve Bot Preference Sync ne demek?

Cloudflare, listelediği dört gerekliliği karşılayan veya karşılamayı taahhüt eden tarayıcı işletmecilerine Accountable etiketi veriyor. Biri, yapay zekâ eğitiminden çıkmanın geleneksel arama sonuçlarını etkilemeyeceği güvencesi. Cloudflare'ın ifadesiyle etiket, bugün sunulan yetenekleri ve bunları sunmaya yönelik somut taahhütleri tanıyor.

Cloudflare ayrıca Managed Robots.txt'nin yerini Bot Preference Sync'in alacağını ve Managed Robots.txt'yi açmış müşterilerin yeni sisteme taşınacağını söylüyor. 21 Ağustos 2026'da yayımlanıp 15 Eylül'de güncellenen Bot Preference Sync yazısı, amacı ayarladığınız tercihin yayımladığınız tercih olması diye belirtiyor; Free'den Enterprise'a tüm planlarda bulunduğunu söylüyor.

Yeni raporlama

Bot size bir şey geri gönderiyor mu?

Cloudflare, ayarlarla birlikte yapay zekâ botlarının sitede ne yaptığını görmenin iki yolunu ekledi.

  • Attribution Business Insights

    Tarama-yönlendirme oranı

    Kim erişebilir?
    Yalnızca Bot Management Enterprise müşterileri; her Cloudflare müşterisi değil.

    Botun ne kadar taradığıyla kaç ziyaretçi geri gönderdiğini, tüm site ve bot işletmecisi bazında 24 saat, 7 gün veya 30 gün boyunca karşılaştırır. Cloudflare bunu yeni kontrol değil, görünürlük olarak tanımlar.

  • BotBase

    Hangi bot hangisi?

    Cloudflare'ın her botu Search, Agent veya Training diye nasıl sınıflandırdığını gösterir, her birine tespit kimliği verir ve izlenen tüm botları Cloudflare Radar'ın kamuya açık bot ve ajan dizininde listeler.

Bizim değerlendirmemiz: Oranı çok alıp az geri gönderen botları sorgulamak için kullanın. Öneri, satış veya geliri değil, ziyaretleri sayar.

Bu rakamların söyleyemedikleri

Oran, taramayı yönlendirilen ziyaretçilerle karşılaştırır. Dönüşüm artışı, öneri kalitesi, kaynak gösterimi kalitesi, gelir veya yatırım getirisi değildir.

Cloudflare'ın sınıflandırmaları her yapay zekâ isteğini veya her işletmecinin niyetini kusursuz yakalamaz.

Erişim doğruluk değildir

Tarama ayarı kimin okuduğuna karar verir. Ne söylediğine değil.

Erişimi doğru ayarlamak gereklidir. Ancak yerel işletme hakkındaki çoğu yapay zekâ yanıtının yanıldığı yer, sayfanızın arkasındaki bilgilerdir.

Tarama ayarının karar verdikleri

  • Hangi yapay zekâ tarayıcılarının sitenizi okuyabileceği
  • Arama, ajanlar veya eğitim için kullanıp kullanamayacakları
  • Cloudflare'ın hangi botları tanıyıp nasıl etiketlediği

Yalnızca sizin doğru tutabileceğiniz bilgiler

  • Her yerde aynı adınız, adresiniz ve kategoriniz
  • Güncel çalışma saatleri, özel gün saatleri ve müsaitlik
  • Rezervasyon, ön ödeme, iptal ve hizmet koşulları
  • Gerçekten sunduklarınız; müşterilerin kullandığı sözlerle

Burada hiçbir şey bu kontrollerin ChatGPT, Gemini, Perplexity, Google AI Mode veya başka yapay zekâ sisteminde sıralama veya önerileri iyileştirdiğini iddia etmiyor.

Ayarlar doğruyken nerede yanlış gider?

Site Search'e izin verip Training'i engeller; yapay zekâ yine de üç hafta önce değişen saatleri tekrarlar.

İşletme içeriğini korumak için Agent trafiğini engeller; sonra gerçek müşterinin asistanının yapabileceği görevi tamamlayamadığını görür.

Ekip, Managed Robots.txt müşterilerinin Bot Preference Sync'e geçeceğini okur, eğitim reddinin yürürlükte olduğunu varsayar ve kontrol için kendi ayarlarını hiç açmaz.

Ne yapmalı?

Kendi sitenizde kontrol edilecek beş şey

Duyuru ürünün sunduklarını söyler. Sitenizin yaptığını yalnızca kendi ayarlarınız söyler.

  1. Kendi ayarlarınızı açın

    Siteniz Cloudflare'daysa alan adınız için Search, Agent ve Training'in gerçekte hangi değerlere ayarlı olduğunu okuyun. Emin değil misiniz? Sitenizi veya alan adınızı kuran kişiye sorun.

  2. Bulunmak istiyorsanız Search'ü açık tutun

    Aramadan çıkmadan yapay zekâ eğitimini reddetmek için Googlebot, Bingbot ve Applebot'u da durdurabilen Block yerine Disallow AI Training kullanın.

  3. robots.txt dosyanızı okuyun

    Otomatik ziyaretçilere ne okuyabileceklerini söyleyen kısa kamuya açık dosyadır; örneğin yourrestaurant.com/robots.txt. Şimdi ne dediğini ve eski Managed Robots.txt ayarının taşınıp taşınmadığını kontrol edin.

  4. Oranı soru olarak ele alın

    Tarama-yönlendirme raporunuz varsa çok alıp az geri gönderen botları sorgulamak için kullanın; öneri veya satış kanıtı olarak değil.

  5. Bilgileri düzeltin, sonra ayrı raporlayın

    Saat, adres, hizmet ve politikaların doğru olduğunu kontrol edin; “yapay zekâ bizi okuyabiliyor mu” ve “söyledikleri doğru mu” sorularını iki ayrı sonuç olarak raporlayın.

Bu araştırma hakkında sorunuz mu var?

Kaynaklar veya işletmeniz için ne anlama gelebilecekleri hakkında Obenan Research'e yazın.

Kaynaklar

Bu bilgiler nereden geliyor?

Cloudflare'ın 1 Temmuz ve 15 Eylül 2026 yayınlarına ilişkin yedi resmî sayfadan, her birinin son kontrol tarihiyle hazırlandı; 15 Eylül yazısı ve Bot Preference Sync yazısı 5 Ekim 2026'da yeniden okundu. Cloudflare'ın duyurduklarını aktarıyoruz. Cloudflare hesabı, müşteri alan adı, robots.txt dosyası veya geçiş kontrol edilmedi; bu yüzden burada hiçbir şey gerçek sitenin ayarını tarif etmiyor. Obenan'ın Cloudflare, OpenAI, Microsoft, Google veya burada adı geçen kaynaklarla bağlılığı, ortaklığı, entegrasyonu veya desteği yoktur; uç ağ altyapısı, tarama kontrolü veya bot sınıflandırması işletmez.

  1. Cloudflare: Your site, your rules, new AI traffic options for all customers

    Cloudflare Yayımlandı Kontrol edildi

    Free dâhil tüm müşteriler için Search, Agent ve Training ayarları; Cloudflare'ın o sırada 15 Eylül 2026 için planladığı yeni alan adı varsayılanı.

  2. Cloudflare: New options to manage AI traffic (changelog)

    Cloudflare developer docs Yayımlandı Kontrol edildi

    İzin ver, engelle ve reklamlı sayfalarda engelle seçenekleri; değişiklik günlüğünün o sırada planladığı yeni alan adı varsayılanı.

  3. Cloudflare: Unmasking the crawls with Attribution Business Insights

    Cloudflare Yayımlandı Kontrol edildi

    Panonun amacı ve gösterdiği tarama-yönlendirme oranları.

  4. Cloudflare: Attribution Business Insights (docs)

    Cloudflare developer docs Yayımlandı Kontrol edildi

    Bot Management Enterprise erişimi, oranın tanımı ve kontrol değil görünürlük sağlaması.

  5. Cloudflare: More visibility into bot traffic with BotBase and Attribution Business Insights (changelog)

    Cloudflare developer docs Yayımlandı Kontrol edildi

    BotBase sınıflandırmaları, bot başına tespit kimlikleri ve Cloudflare Radar'daki kamuya açık bot dizini.

  6. Cloudflare: Have it both ways: stay discoverable in search while disallowing AI training

    Cloudflare Yayımlandı Kontrol edildi

    Disallow AI Training, Block'un artık durdurdukları, Accountable koşulları, yeni alan adı ön ayarları, Microsoft'un 2027 başı hedefi ve Bot Preference Sync'e geçiş. 5 Ekim 2026'da yeniden okundu.

  7. Cloudflare: Say it once: introducing Bot Preference Sync

    Cloudflare Yayımlandı Kontrol edildi

    Tercihin robots.txt'ye nasıl yayımlandığı, belirtilen amaç ve tüm planlarda erişim. Cloudflare tarafından 15 Eylül 2026'da güncellendi; 5 Ekim 2026'da yeniden okundu.