Revolucija u Čuvanju Online Sadržaja: Cloudflare i ‘Plaćanje po Crawlu’
Danas, online kreatori često nemaju potpunu kontrolu nad tipovima botova koji mogu pristupiti njihovom sadržaju. No, Cloudflare je razvio inovativno rješenje. Tvrtka je ponovo uvela HTTP odgovor kod 402 kao pametan način kako blokirati ili naplatiti AI botovima pristup vašoj web stranici kroz novu značajku pod nazivom ‘plaćanje po crawlu’.
Kako Funkcionira ‘Plaćanje po Crawlu’?
Najbolji dio ove značajke je fleksibilnost koju nudi korisnicima. Kreirati možete različite razine pristupa, uključujući:
- Omogućavanje određenim botovima besplatan pristup.
- Naplata nekim botovima za pristup.
- Blokiranje botova koje ne želite da pregledavaju vaš sadržaj.
HTTP odgovor kod 402, poznat i kao statusni kod 402 – Plaćanje potrebno, ukazuje botovima da je potrebna uplata za pristup sadržaju. Na taj način, bot može ili odgovoriti s namjerom plaćanja ili biti blokiran od pristupa.
Prozirna Autentifikacija Botova
Jedna od briga može biti mogućnost da netko jednostavno imitira bot koji ima pristup stranici. Cloudflare je anticipirao ovaj problem i pruža rješenje. Autentični botovi koriste ‘signature-agent’, ‘signature-input’ i ‘signature’ zaglavlja za autentifikaciju kod Cloudflare-a.
Nakon toga, Cloudflare uspoređuje javni ključ iz Ed25519 ključnog para pohranjenog u registriranom direktoriju s URL-om te informacije korisničkog agenta. Ovaj proces osigurava da samo autentični botovi dobiju pristup dok su svi lažni botovi blokirani.
Budžetiranje i Cjenovna Pristupačnost
Botovi će također moći pregledavati web s određeno postavljenim budžetom kada traže pristup zaštićenim stranicama. Koristeći ‘crawler-exact-price’ zaglavlje, bot će prihvatiti ponuđenu cijenu navedenu u ‘crawler-price’ zaglavlju željene stranice. Osim toga, mogu unaprijed postaviti ‘crawler-max-price’ prilikom pristupa stranici koja će im omogućiti pristup ako je cijena jednaka ili manja od budžeta bota.
Pogled u Budućnost Plaćanja po Crawlu
Cloudflare ima ambiciozne planove za budućnost u vezi s plaćanjem po crawlu. Zamislite AI agenta kojem je dodijeljen budžet za pregledavanje weba nakon što primi neki zahtjev. Time bi korisnici mogli dobiti pristup visokokvalitetnom i relevantnom sadržaju putem jednostavnog upita.
Zaključak
Trenutno, plaćanje po crawlu je dostupno samo u privatnoj beta verziji. Ako ste zainteresirani da saznate više, slobodno se obratite Cloudflare-u putem linka pri dnu njihovog bloga. Ova inovacija ima potencijal potpuno promijeniti način na koji online kreatori upravljaju i zaštite svoj sadržaj. Budućnost za online zajednicu izgleda svijetla!
