Cloudflare'nin yeni “Crawl Pay” girişimi SEO profesyonelleri ve dijital pazarlamacılar arasında bir tartışmaya yol açtı.
Şirket, yayıncılar için yeni para kazanma seçeneklerinin yanı sıra varsayılan bir AI paletli engelleme sistemi getirdi.
Bu, yayıncıların AI şirketlerini erişim için ücretlendirmesini sağlar, bu da web içeriğinin üretken arama çağında tüketildiğini ve değerlendiğini etkileyebilir.
Cloudflare'nin yeni varsayılanı: Block AI tarayıcılar
Şimdi özel betadaki sistem, yeni Cloudflare alan adları için varsayılan olarak bilinen AI tarayıcılarını engeller.
Yayıncılar, her bir paletli için üç erişim ayarından birini seçebilir:
- İzin vermek – Sınırsız erişim için
- Şarj -Yapılandırılmış, alan çapında fiyattan ödeme yapmayı gerektirin
- Engellemek – erişimi tamamen reddetmek
Engellenen içeriğe erişmeye çalışan tarayıcılar bir 402 Payment Required cevap. Yayıncılar talep başına daire, site çapında bir fiyat belirler ve Cloudflare faturalandırma ve gelir dağıtımını ele alır.
Cloudflare yazdı:
“En sevdiğiniz derin araştırma programınızdan en son kanser araştırmasını veya yasal bir özeti sentezlemenize yardımcı olmasını veya sadece Soho'daki en iyi restoranı bulmanıza yardımcı olmanızı ve daha sonra bu acenteye en iyi ve en alakalı içeriği elde etmek için harcamak için bir bütçe vermenizi sağlayın.
Teknik Detaylar ve Yayıncının Evlat Edinme
Sistem, doğrudan Cloudflare'nin bot yönetim araçlarıyla entegre olur ve mevcut WAF kurallarıyla birlikte çalışır ve robots.txt dosyalar. Kimlik doğrulama, sahtekarlığı önlemek için ED25519 anahtar çiftleri ve HTTP mesaj imzaları kullanılarak işlenir.
Cloudflare, erken benimseyenlerin Condé Nast, Time, Atlantic, AP, BuzzFeed, Reddit, Pinterest, Quora ve diğerleri gibi büyük yayıncıları içerdiğini söylüyor.
Mevcut kurulum yalnızca düz fiyatlandırmayı desteklerken, şirket gelecekteki yinelemelerde dinamik ve ayrıntılı fiyatlandırma modellerini keşfetmeyi planlıyor.
SEO topluluğu endişeleri paylaşıyor
Cloudflare'nin yeni kontrolleri manuel olarak değiştirilebilirken, birkaç SEO uzmanı, sistemin katılımdan ziyade devre dışı bırakılmasının etkisinden endişe duyuyor.
“Bu iyi bitmeyecek,” diye yazdı Yext Endüstri İçgörüleri Başkan Yardımcısı Duane Forrester, işletmelerin bir ücret ödenmedikçe paletli erişimin engellendiğini fark etmeden AI destekli cevaplarda görünmek için mücadele edebileceğini söyledi.
SEO Strateji ve Araştırma Başkan Yardımcısı Lily Ray, değişikliğin müşterilerle, özellikle sitelerinin artık varsayılan olarak AI tarayıcıları tarafından görünmez olabileceğinden habersiz olan müşterilerle acil görüşmelere yol açabileceğini belirtti.
Razorfish'in SEO Kıdemli Başkan Yardımcısı Ryan Jones, müşteri sitelerinin çoğunun aslında AI tarayıcılarının görünürlük nedeniyle içeriklerine erişmelerini istediğini ifade etti.
Bazıları bunun gerekli bir sıfırlama olduğunu söylüyor
Topluluktaki bazıları, içerik ekonomisinin uzun süredir yeniden dengelenmesi olarak hareketi memnuniyetle karşılıyor.
Teknik SEO danışmanı ve Google'ın arama kalitesi ekibinin eski üyesi Pedro Dias, “Dengeyi bir zamanlar olduğu yere geri eğmek için bir güç gerekiyor” dedi. Mevcut dinamiğin AI şirketlerini yayıncılar pahasına desteklediğini öne sürüyor.
Shopify'da seçkin mühendis ve teknik danışman olan Ilya Grigorik, meşru ve kötü niyetli botları ayırt etmenin ne kadar zor olduğunu göz önüne alındığında, “çok ihtiyaç duyulduğunu” söyleyerek kriptografik kimlik doğrulamasının kullanımını övdü.
Yeni sistem altında, tarayıcılar genel anahtar kriptografisini kullanarak kimliği doğrulamalı ve özel HTTP başlıkları aracılığıyla ödeme niyetini bildirmelidir.
Paletli Erişim Yönetimi: Ne Yapabilirsiniz
CloudFlare'nin yeni varsayılan ayarları yürürlüğe girdikçe, AI arama araçlarında görünürlüğü kaybetme konusunda endişe var. Ancak kontrolü yeniden kazanma seçenekleriniz var.
AI trafiği, fark etmeden AI botlarını engellerse keskin bir şekilde düşebilir.
Dijital Analytics danışmanı ve OptimesSmart'ın kurucusu Himanshu Sharma, x'de uyardı:
“GA4 tarafından bildirilen AI trafiğinde, CloudFlare bloklarını bloke ettiği için, bilinen tüm AI tarayıcılarının/botlarının web sitenizi varsayılan olarak kazımasını bekleyin.”
Sharma, site sahiplerine Cloudflare ayarlarını proaktif olarak gözden geçirmelerini tavsiye etti:
- Cloudflare kontrol panelinize gidin
- Güvenliğe Git> Bots
- “Block AI Eğitim Botları” ayarını bulun
- AI tarayıcılarına izin vermek istiyorsanız, “Tüm Sayfaları Engelle” nden “Engellemeyin (KAPALI)” olarak değiştirilmesi için açılır listeyi kullanın
Bu seçenek, AI güdümlü platformlarda görünürlüğü korumak veya eğitim ve yanıtlar için içerik kullanımını sınırlamak isteyip istemediğinize karar vermenize olanak tanır.
İleriye Bakış
Cloudflare'nin tarama başına ödeme sistemi, web içeriğine kimin erişebileceği ve ne pahasına olursa olsun yeni bir müzakere katmanını resmileştirir.
SEO profesyonelleri için bu karmaşıklık ekler: görünürlük artık sadece sıralamaya değil, paletli erişim ayarlarına, ödeme politikalarına ve bot kimlik doğrulamasına da bağlı olabilir.
Bazıları bunu güçlendirici yayıncılar olarak görürken, diğerleri içerik erişiminin altyapı ve ödeme duvarlarına göre değiştiği açık web'i parçalayabileceği konusunda uyarıyor.
Üretken AI, insanların nasıl aradığının temel bir parçası haline gelirse ve AI'nın artık ücretli yollar olduğunu besleyen borular, web sitelerinin büyüyen bir sistem, politikalar ve finansal modeller boyunca görünürlüğü yönetmesi gerekecektir.
Öne çıkan resim: Roman Samborskyi/Shutterstock
Bir yanıt yazın