Cloudflare Verified bot-lərin etibarın davamlı monitorinqini əlavə etdi

Bir dəfəlik autentifikasiyadan davamlı monitorinqə

Cloudflare Verified bot-ların identifikasiyanı təsdiqləndikdən sonra məsuliyyətli davranışı davam etdirib-etdirməyini qiymətləşdirən sistem təqdim edib. Şirkət bot-un kim tərəfindən idarə edildiyini müəyyən edir: autentifikasiya kim bot-u idarə edir göstərir, etibar isə onun sonradan nə etdiyindən asılıdır. Verified bot-lar belə vebsaytın üstünlüklərini ihlal edə bilər, origin serverləri yükləyə bilər və ya nəzarəti keçməyə çalışa bilər, çox vaxt zərərli niyətdən deyil, yalnız səhv konfiqurasiyaya görə.

Cloudflare-ın Verified Bot statusuna nail olmaq üçün operatorlar üç meyara cavab verməlidir: özlərini dəqiq və təhlükəsiz şəkildə təqdim etmək, yalnız etməyə verdiklərini yerinə yetirmək və sui-istifadə davranışından uzaq durmaq. Bot-lar Web Bot Auth-dan onların identifikasiyanı təsdiq edən sorğuları imzalamaq üçün istifadə edir, BotBase isə onları açıq formatda kataloqda saxlayır. Identifikasiya həll olduqdan sonra, Cloudflare-ın dediyinə görə, diqqət indi Verified bot-ların ikinci qaydasına yönəlir: zərər etmə.

Daimi qiymətləşmələrə əvəz etibar aralıqları

Sistem bot-ların vebsaytın üstünlüklərini nə qədər tez-tez qoruyub-qoruduğunu ölçür və bu müşahidələri anlaşılan etibar aralığına çevirir. Bu aralıq bot-ların üstünlüklərini nə qədər ardıcıl qoruduğunu göstərir və hansı davranışlar qiymətləşmənin əsası olub, bot-a və ya onun operatoruna daimi qərar vermir.

Cloudflare risk ilə etibarı fərqləndirir: risk hər hansı bir tələbin zərərli ola biləcəyi ehtimalını göstərir və bir andan digərə dəyişə bilər, etibar isə zaman ərzində, davamlı və ardıcıl davranışlarla qurulub. Şirkət 2025-ci ildə Perplexity bot-unun Verified bot-lar siyahısından çıxarılması nümunəsini gətirir, o scraping-i rədd edən vebsaytların resurslarına daxil olmağa çalışıb, sonra isə bu tələblər bloklandıqdan sonra nəzarəti keçməyə çalışıb.

robots.txt-in qorunması və sorğuların limitinə reaksiya

Sistemin qiymətləşdiyi ilkin siqnallar bot-ların təlimatlarına əməl edib-etməməsi və birbaşa əlaqə üzərində reaksiya verib-verməməsidir. robots.txt faylı vebsaytlar üçün üstünlüklərin ötürülməsinin əsas yoludur və sistem RFC 9309-a uyğun olaraq müşahədə olunan trafikin zaman ərzində bu yayılmış üstünlüklərə uyğun olub-olmadığına baxır. Cloudflare robots.txt-in bot-lar üçün minimal qaydalar təyin etdiyini və elanın olmaması icazə demədiyini bildirir. Şirkət tək-tək pozuntuları deyil, ihlalin təkrarlanan nümunələrini araşdırır.

Sistem həmçinin bot-ların HTTP 429 cavablarına necə reaksiya verdiyini izləmir, bu cavablar ziyarətçilərə sorğuların tezliyini azalmağı təklif edir. Bu siqnalda ardıcıl ləngimə və ya fasilə etibarı artırır, onun təkrarlanması isə bot-un statusunu azaldır.

Yayım planları

Sistem Bot Preference Sync ilə birlikdə işləmir, bu sahiblərə üstünlükləri yayımağa kömək edir, həmçinin Bot Management ilə, bu sahiblərə avtomatik trafik necə işlənəcəyini seçməyə imkan verir. Cloudflare artıq daxildə sistemdən Verified bot-ların vebsaytın üstünlüklərini nə qədər ardıcıl qoruduğunu qiymətləşdirmək, davamlı nümunələri deyil, tək-tək hadisələri qiymətləşdirmək üçün istifadə edir. Şirkət onu bütün Cloudflare müştəriləri üçün əlçatan etməyi planlaşdırır, onlar etibar həddini seçə bilərlər, bu Verified bot-ların trafikinin necə işlənəcəyini müəyyən edir. Balans xalları gələcəkdə, ehtimal ki, Radar üzərində açıqlanacaq.

Mənbələr: Cloudflare