alimir

متن برای Robot.txt

7 پست در این موضوع قرار دارد

با سلام و درود فراوان...

دوستان، متن زیر رو برای robot تأیید میکنید؟


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: */trackback
Disallow: */feed
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*
Sitemap: User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: */trackback
Disallow: */feed
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*
Sitemap: http://alimir.ir/sitemap.xml

ویرایش شده در توسط alimir

به اشتراک گذاری این پست


لینک به پست

چرا cgi-bin و یا فولدرهای دیگه رو دو بار تکرار کردید؟

و حتماً می دونید که نام فایل روبوت به طور صحیح: robots.txt هست

به اشتراک گذاری این پست


لینک به پست

چرا cgi-bin و یا فولدرهای دیگه رو دو بار تکرار کردید؟

و حتماً می دونید که نام فایل روبوت به طور صحیح: robots.txt هست

عجیبه! الان اینطوری شده!!!

یعنی باید پسوند رو هم در نام به کار ببرم؟!؟

به اشتراک گذاری این پست


لینک به پست

پسوند چه فایلی؟

نام اصلی فایل ربوت: robots.txt هست

به اشتراک گذاری این پست


لینک به پست

حله :)

از کدکس وردپرس استفاده میکنم.


Sitemap: http://alimir.ir/sitemap.xml
# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*
# Google AdSense
User-agent: Mediapartners-Google
Disallow:
# digg mirror
User-agent: duggmirror
Disallow: /
# global
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /comments/
Disallow: /category/*/*
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /*?
Allow: /wp-content/uploads/

تو این کد فرضا برای Category دوتا اسلش و ستاره داره، اینا چجورین؟!؟

به اشتراک گذاری این پست


لینک به پست

یعنی تا زیر مجموعه دوم اعمال میشه

category/test1/test2

به اشتراک گذاری این پست


لینک به پست

برای ارسال نظر یک حساب کاربری ایجاد کنید یا وارد حساب خود شوید

برای اینکه بتوانید نظر ارسال کنید نیاز دارید که کاربر سایت شوید

ایجاد یک حساب کاربری

برای حساب کاربری جدید در انجمن ما ثبت نام کنید. عضویت خیلی ساده است !


ثبت نام یک حساب کاربری جدید

ورود به حساب کاربری

دارای حساب کاربری هستید؟ از اینجا وارد شوید


ورود به حساب کاربری