خزندهٔ سئورا (SeoraBot) چگونه میخزد، خود را معرفی میکند و چگونه میتوانید آن را مسدود کنید.
ممیزیهای سئورا فقط صفحههای عمومی سایت را میخوانند. این صفحه توضیح میدهد خزندهٔ ما روی سایتهایی که کاربرانمان مالک آنها نیستند چگونه رفتار میکند، چطور آن را در لاگهای خود بشناسید و برای گزارش سوءاستفاده چگونه با ما تماس بگیرید.
SeoraBot با یک User-Agent که به همین صفحه پیوند دارد خود را معرفی میکند.
خزیدن روی سایتهایی که حساب کاربر مالکشان نیست به قوانین robots.txt و دستور Crawl-delay احترام میگذارد.
خزیدنها کوچک و فقطخواندنیاند: تعداد محدودی صفحهٔ عمومی، بدون فرم و بدون ورود.
مالکان سایت میتوانند SeoraBot را در robots.txt مسدود کنند یا سوءاستفاده را به ما گزارش دهند.
robots.txt
قوانین Disallow در هر خزیدنی رعایت میشود؛ Crawl-delay هم زمانی که حساب مالکیت سایت را تأیید نکرده باشد رعایت میشود.
فقطخواندنی
SeoraBot فقط درخواستهای GET و HEAD به صفحههای عمومی میفرستد. هرگز فرم ارسال نمیکند، تلاش برای ورود نمیکند و محتوایی منتشر نمیکند.
محدود
هر ممیزی تعداد محدودی صفحه را با سرعت مهارشده و در یک بودجهٔ زمانی سخت میخزد تا فشار روی سایت ناچیز بماند.
چگونه SeoraBot را بشناسید
وقتی کاربر واردشدهٔ سئورا سایتی را ممیزی میکند که مالکیتش را تأیید نکرده، خزیدن با یک User-Agent انجام میشود که به همین صفحهٔ سیاست پیوند دارد. ممیزی سایتهایی که حساب مالکیتشان را تأیید کرده (سایت خودِ مالک) با عامل استاندارد ممیزی ما انجام میشود.
ممیزی سایت شخص ثالث: «SeoraBot/1.0 (+https://seora-ai.com/crawler)».
ممیزی سایت با مالکیت تأییدشده: «SEOAI-Bot/1.0 (+https://seora.app/bot)».
هر خزیدن را یک کاربر واردشده و پاسخگوی سئورا آغاز کرده که ممیزی سئوی همان نشانی را خواسته است — SeoraBot خودسرانه در وب نمیگردد.
SeoraBot به چه چیزهایی احترام میگذارد
این خزنده ساخته شده تا روی سایتهایی که کاربران ما مالکشان نیستند شهروند خوبی باشد. پیش از هر واکشی robots.txt شما را میخواند و ردپایش را کوچک و قابل پیشبینی نگه میدارد.
قوانین Disallow در robots.txt در هر خزیدنی رعایت میشود، چه شخص ثالث چه غیر آن.
دستور Crawl-delay در خزیدنهای شخص ثالث رعایت میشود (با یک سقف منطقی تا ممیزی باز هم تمام شود).
سقف تعداد صفحه، فاصلهٔ ادب میان واکشیها و یک بودجهٔ زمانی سخت هر خزیدنی را محدود میکند.
فقط صفحههای عمومی وب واکشی میشوند — درخواست به شبکههای خصوصی و نشانیهای داخلی از اساس مسدود است.
مسدودکردن SeoraBot یا گزارش سوءاستفاده
اگر نمیخواهید سئورا سایت شما را ممیزی کند، یک قانون robots.txt کافی است — SeoraBot در خزیدن بعدی آن را رعایت میکند. اگر فکر میکنید خزیدنی بدرفتاری کرده، به ما بگویید تا بررسی کنیم.
مسدودکردن همهٔ خزیدنها: «User-agent: SeoraBot» و سپس «Disallow: /» را به robots.txt خود اضافه کنید.
گزارش سوءاستفاده: دامنه، بازهٔ زمانی و آنچه در لاگها دیدهاید را به abuse@seora-ai.com ایمیل کنید.
هر گزارش را بررسی میکنیم و میتوانیم دامنهٔ شما را از خزیدنهای شخص ثالث آینده کنار بگذاریم.
SeoraBot را در لاگهای خود دیدهاید؟
دامنه، بازهٔ زمانی و آنچه دیدهاید را به abuse@seora-ai.com بفرستید — هر گزارش را بررسی میکنیم و میتوانیم سایت شما را از خزیدنهای شخص ثالث آینده کنار بگذاریم.