زیرساخت و توسعه

Cloudflare رفتار Verified Botها را به‌طور مداوم ارزیابی می‌کند

سامانهٔ تازهٔ Cloudflare می‌سنجد ربات‌های تأییدشده تا چه اندازه به خواسته‌های وب‌سایت‌ها، از جمله robots.txt و پاسخ HTTP 429، پایبند می‌مانند.

۲ دقیقه مطالعه

Cloudflare سامانه‌ای برای ارزیابی پیوستهٔ رفتار Verified Botها معرفی کرده است. هدف این است که تأیید هویت یک ربات به‌تنهایی نشانهٔ قابل‌اعتمادبودن آن تلقی نشود و میزان پایبندی‌اش به ترجیحات وب‌سایت‌ها نیز در گذر زمان سنجیده شود. حتی رباتی با هویت مشخص ممکن است محدودیت‌های سایت را نادیده بگیرد یا به‌دلیل خطا و پیکربندی نادرست، به سرورهای آن فشار وارد کند.

این سامانه بررسی می‌کند خزنده‌ها تا چه اندازه به درخواست سایت‌ها برای نرفتن به سراغ بعضی محتواها یا کاهش سرعت دسترسی احترام می‌گذارند. Cloudflare می‌گوید مشاهدات را به یک «بازهٔ اعتماد» توضیح‌پذیر تبدیل می‌کند؛ بازه‌ای که هم میزان پایبندی ربات و هم رفتارهای مبنای ارزیابی را نشان می‌دهد، نه حکمی دائمی دربارهٔ ربات یا گردانندهٔ آن.

Cloudflare پیش‌تر در سال ۲۰۲۵ ربات Perplexity را از فهرست Verified Botها حذف کرده بود؛ به‌گفتهٔ این شرکت، ربات به محتوای سایت‌هایی دسترسی می‌خواست که با خزش موافقت نکرده بودند و پس از مسدودشدن درخواست‌ها، کوشیده بود محدودیت‌ها را دور بزند.

این شرکت می‌گوید در آینده امتیازها را در Radar به‌صورت عمومی منتشر می‌کند و روش‌های ارزیابی را گسترش می‌دهد. در حال حاضر، احراز هویت ربات‌ها با Web Bot Auth انجام می‌شود و BotBase اطلاعات هویتی آن‌ها را در قالبی باز فهرست می‌کند.

این گزارش به کمک هوش مصنوعی تهیه شده است. مطالب براساس منابع درج‌شده تنظیم شده‌اند؛ صحت مستقل همه ادعاها تضمین نمی‌شود.

منبع: Cloudflare Blog — مشاهده منبع اصلی ↗