شرکت کلودفرد، ارائه دهنده سرویس نامهای دامنه و دیگر خدمات وب، در گزارش افشاگرانه جدیدی به استفاده شرکت هوش مصنوعی Preplexity از خزندههای مخفی برای دور زدن محدودیتهای دسترسی به محتوا اشاره کرده است. طبق اعلام کلودفلر، پلتفرم هوش مصنوعی Perplexity AI از خزش مخفیانه برای دسترسی به محتوای وبسایتها استفاده میکند و با استفاده از این روش حتی زمانی که با صراحت در فایلهای robots.txt یا قوانین امنیتی وب (WAF) دسترسی روباتها منع شده است، به خزش ادامه میدهد.
به گزارش پیوست، کلودفلر در پست وبلاگی خود توضیح میدهد که با توجه به رفتار نادرست خزندههای شرکت پریپلکسیتی، شرکت ارائه دهنده مرورگر و موتور جستجوی مبتنی بر هوش مصنوعی، این شرکت روبات آنها را از لیست تایید شده حذف کرده و قوانینی را برای جلوگیری از این نوع خزش مخفیانه اعمال کرده است.
طبق اعلام کلودفلر،Perplexity ابتدا از خزندههایی با عاملیت کاربری مانند PerplexityBot و Perplexity User استفاده میکند. اما زمانی که این خزندهها توسط سایتها یا فایروالها مسدود میشوند، این شرکت روش خود را تغییر داده و با استفاده از User-Agentهای عمومی، مانند مرورگر کروم در مکاواس، تلاش میکند هویت واقعی خود را پنهان کرده و محدودیتها را دور بزند.