Cloudflare legújabb döntése, miszerint eltávolította a Perplexity nevű keresőrobotot a hitelesített botok listájáról, jelentős hatással lehet a weboldalak keresési viselkedésére. A döntés hátterében több felhasználói panasz állt, amelyek a Perplexity botjának viselkedését kifogásolták, különösen a robots.txt fájl figyelmen kívül hagyása miatt. A Cloudflare vizsgálata során megállapította, hogy a Perplexity agresszív taktikákat alkalmazott, hogy hozzáférjen a weboldalak tartalmához. A Cloudflare hitelesített botok programja A Cloudflare rendelkezik egy hitelesített botok programmal, amely lehetővé teszi a megbízható botok számára, hogy hozzáférjenek a weboldalakhoz, amelyeket a Cloudflare véd. Ahhoz, hogy egy bot a hitelesített státuszt megkapja, be kell tartania bizonyos szabályokat, például tiszteletben kell tartania a robots.txt fájlt. A Perplexity azonban ezen követelményeknek nem…