Cloudflare Doğrulanmış Botları Sürekli Denetleyecek Yeni Bir Sistem Başlattı

Ağ ve güvenlik altyapısı sağlayıcısı Cloudflare, "Doğrulanmış Bot" (Verified Bot) programındaki otomatik yazılımların davranışlarını aralıksız takip eden yeni bir denetim sistemini kullanıma sundu. Sistem, daha önce güvenilir olarak sınıflandırılmış botların web sitelerinin belirlediği kurallara zaman içinde uymaya devam edip etmediğini kontrol ediyor.

Mevcut bot doğrulama süreçleri çoğunlukla botun arkasındaki kurumun kimliğini teyit etmeye dayanıyordu. Cloudflare'in yeni yaklaşımı ise kimliğin tek başına sorumlu davranışı garanti etmediği gerçeğine odaklanıyor. Yeni denetim altyapısıyla birlikte, arama motorları ve yapay zeka tarayıcıları gibi onaylı botlar da teknik kurallara uyumları açısından düzenli olarak puanlanacak.

Sistem, özellikle web sitelerinin tarama sınırlarını belirten robots.txt dosyalarına uyulup uyulmadığını ve sunucunun aşırı yüklenme durumunda ilettiği HTTP 429 (Çok Fazla İstek) durum kodlarının dikkate alınıp alınmadığını izliyor. Sunucu uyarılarına rağmen tarama hızını düşürmeyen veya site kurallarını ihlal eden botlar, doğrulanmış statülerini kaybedebilecek veya sistem tarafından kısıtlamalarla karşılaşacak.

Yapay zeka modellerinin veri toplama süreçlerinin hızlanmasıyla birlikte web sitelerine binen bot trafiği son yıllarda ciddi bir artış gösterdi. Birçok site yöneticisi, kaynaklarının izinsiz veya agresif biçimde tüketilmesinden şikayet ederken, Cloudflare'in bu hamlesi site sahiplerine belirlenen kuralların teknik düzeyde zorunlu kılınması konusunda ek bir koruma katmanı sağlamayı hedefliyor.