وضعیت ربات AhrefsBot

[neda411 248]

سلام دوستان دو ربات AhrefsBot و ربات یاندکس سایت من را دان کردن .

آمار بازدید ها اینقدر بالا رفته که میهن وب هاست کلا دسترسی آی پی ها خارجی را بسته الان سه هفته شده هرکار به ذهنم میرسید کردم ولی جواب نداد

به نت افراز وضعیتم را گفتم ، گفتند شرمنده اگر بیایید اینجا مشکل شما حل نمیشه

مشکل من :

در قسمت بازدید هام یک ربات داره یکسر میاد سایت که مقدار Hostname به این شکل می باشد :
hydrogen042.a.ahrefs.com البته در هر بازدید مقدار hydrogen042 تغییر میکنه
فایل htaccess را به این شکل تنظیم کردم :
<Files 403.shtml>
order allow,deny
allow from all
</Files>
deny from 195.146.37.19
deny from .a.ahrefs.com
deny from .rev.poneytelecom.eu
و

redirect bad bots to one page RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} Yandex [NC,OR] 
RewriteCond %{HTTP_USER_AGENT} YandexBot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} AhrefsBot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} AhrefsBot/5.2 [NC,OR]
RewriteCond %{HTTP_REFERER} ^http://.ahrefs.com [NC,OR]
RewriteCond %{HTTP_REFERER} ^http://. poneytelecom.eu[NC,OR]
RewriteCond %{REQUEST_URI} !\/
RewriteRule .* http://hamrahna.com/403.shtml [LL]

همچنان بازدید دارم
علاوه بر این ها در فایل robot.txt این مقدار را وارد کردم :
User-agent: AhrefsBot
Disallow: /
User-agent: Yandex
Disallow: /
User-agent: YandexBot
Disallow: /
اما متاسفانه ربات های یاندکس و Ahref همچنان دارند بازدید انجام میدهند 

دیگه کلافه شدم تو رو خدا یکی پیشنهادی بده جلوشون را بگیرم

همچنین اضافه کنم بازدید ها از آی پی مشخص و یا رنج خاصی نیست

ویرایش شده اسفند 95 توسط neda411

[Babak_T 346]

سلام

از سرویس های https://www.cloudflare.com/ 

استفاده کنید خیلی جوابه!

و راحت میتونین اجزیه تحلیل کنین حملات رو

 

یاعلی.

[وردپرس فارسی 272]

سلام

داخل فایل .htaccess کد زیر رو اضافه کنید :

SetEnvIfNoCase User-Agent "AhrefsBot" badbots
SetEnvIfNoCase User-Agent "YandexBot" badbots

<Limit GET POST HEAD>
Order Allow,Deny
Allow from all
Deny from env=badbots
</Limit>

 

ویرایش شده فروردین 96 توسط وردپرس فارسی