رفتن به مطلب

سوال در رابطه با محتوا robots.txt


hossein98

پست های پیشنهاد شده

سلام دوستان میخواستم بپرسم محتوا robots.txt باید چی باشه من http://parsipuls.com/robots.txt هستش میخواستم بدونم مشکلی نداره درسته ؟؟

لینک به ارسال

از راهنمای گوگل:

http://support.google.com/webmasters/bin/answer.py?hl=en&answer=156449&from=35237&rd=1

برای بلوکه کردن جستجو در کل سایت

Disallow: /

برای مسدود کردن جستجوی یک پوشه

Disallow: /junk-directory/

برای مسدود کردن جستجو در یک صفحه

Disallow: /private_file.html

برای اینکه یک عکس در لیست یافته های گوگل دیده نشود

User-agent: Googlebot-Image

Disallow: /images/dogs.jpg

برای پاک کردن کل عکس های سایت از لیست جستجوی گوگل

User-agent: Googlebot-Image

Disallow: /

برای پاک کردن یک فرمت مشخص (مانند gif) از جستجوی گوگل

User-agent: Googlebot

Disallow: /*.gif$

برای صفحاتی که هنوز مطالبشون در حال تکمیله و یا آماده پذیرش آگهی نیست مطالب این صفحات در نتایج جستجو دیده نمی شه ولی گوگل اونها رو آنالیز می کنه و دسته بندی های لازم رو روشون انجام می ده

User-agent: *

Disallow: /

User-agent: Mediapartners-Google

Allow: /

این بخش آخر مهمترین بخششه و اگر درست پر بشه باعث می شه گوگل به سرعت صفحه رو آنالیز کنه و برای صفحات اول نتیجه جستجو شاخه بندیشون کنه

بهتره سایت ها حداقل شش ماه تا یک سال از شروع منظم کارشون مطالبشون رو در این حالت در اختیار گوگل بگذارندو در این مدت به نتیجه قطعی رموضوع سایت برسند و پاسخگوی مباحث سایت باشند تا در گوگل مرجع شناخته شوند

بهترین نمونه

http://www.google.com/robots.txt

لینک به ارسال

به گفتگو بپیوندید

هم اکنون می توانید مطلب خود را ارسال نمایید و بعداً ثبت نام کنید. اگر حساب کاربری دارید، برای ارسال با حساب کاربری خود اکنون وارد شوید .

مهمان
ارسال پاسخ به این موضوع ...

×   شما در حال چسباندن محتوایی با قالب بندی هستید.   حذف قالب بندی

  تنها استفاده از 75 اموجی مجاز می باشد.

×   لینک شما به صورت اتوماتیک جای گذاری شد.   نمایش به صورت لینک

×   محتوای قبلی شما بازگردانی شد.   پاک کردن محتوای ویرایشگر

×   شما مستقیما نمی توانید تصویر خود را قرار دهید. یا آن را اینجا بارگذاری کنید یا از یک URL قرار دهید.

×
×
  • اضافه کردن...