دربارهٔ خزندهٔ ما
SEO Action فقط وقتی به یک وبسایت سر میزند که صاحب آن، سایت را به حساب خود اضافه کرده و خزش را آغاز کرده باشد.
- شناسهٔ کاربر (User agent)
- SEOActionBot/1.0 (+https://orabin.ir/bot)
چه کاری انجام میدهد
خزنده صفحههای عمومی HTML یک وبسایت را مانند یک موتور جستوجو میخواند — عنوانها، سرتیترها، پیوندها و کدهای وضعیت — تا صاحب سایت فهرستی اولویتدار از اصلاحات سئو دریافت کند. هرگز فرمی ارسال نمیکند، وارد حسابی نمیشود و چیزی را تغییر نمیدهد.
چگونه رفتار میکند
به robots.txt احترام میگذارد (مگر آنکه صاحب سایت برای سایت خودش آن را خاموش کند)، حداکثر چند تغییر مسیر را دنبال میکند، در هر خزش تعداد محدودی صفحه را با چند درخواست همزمان میخواند، تصویر و ویدیو و فایل فشرده را دریافت نمیکند و خواندن پاسخهای بسیار بزرگ را متوقف میکند.
چگونه آن را مسدود کنیم
برای نشانهٔ شناسهٔ کاربر زیر در robots.txt خود قاعدهای اضافه کنید؛ مثلاً «User-agent: SEOActionBot» و سپس «Disallow: /». این قاعده از خزش بعدی اعمال میشود.
User-agent: SEOActionBot Disallow: /