Seyed Ali

سوال در مورد فایل robots.txt

2 پست در این موضوع قرار دارد

سلام دوستان

این کد هائیه که تو فایل روبوت سایتم هستم

میشه یه نگاهی بکنید ببینید مشکلی نداره؟



# All Bots
User-agent: *
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /*?
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.wmv$
Disallow: /*.cgi$
Disallow: /*.xhtml$
Disallow: /*rurl=*
Allow: /sitemap.xml.gz$

# Sitemap
Sitemap: http://razva.ir/sitemap.xml.gz

0

به اشتراک گذاری این پست


لینک به پست

سلام

نه مشکلی نداره - میتونید # All Bots رو حذف کنید .

و همچنین دو فایل زیر رو میتونید حذف کنید از روی هاستتون و از صفحه ی روبوت نیز حذف ....

Disallow: /readme.html

Disallow: /license.txt

در کل مشکلی نداره

موفق باشید

4

به اشتراک گذاری این پست


لینک به پست

برای ارسال نظر یک حساب کاربری ایجاد کنید یا وارد حساب خود شوید

برای اینکه بتوانید نظر ارسال کنید نیاز دارید که کاربر سایت شوید

ایجاد یک حساب کاربری

برای حساب کاربری جدید در انجمن ما ثبت نام کنید. عضویت خیلی ساده است !


ثبت نام یک حساب کاربری جدید

ورود به حساب کاربری

دارای حساب کاربری هستید؟ از اینجا وارد شوید


ورود به حساب کاربری

  • مطالب مشابه

    • توسط A . S
      همانطور که متن سوال نشون میده ، من تعداد بسیار زیادی duplicate content تو گوگل دارم  ، که همشون از طریق query ها ایجاد شده
      به این تصویر دقت کنید !
      با اینکه گوگل تمام query parameter هارو میشناسه ، اما همچنان duplicate ها بسیار زیادن 
      حالا سوال من اینه ، آیا این پارامتر هارو تو robots.txt ببندم که کلا واردشون نشه ؟ 
      مثل این فایل روبوت : 
      User-agent: * Disallow: /wp-admin/ Disallow: /*?mweb* Disallow: /*?product_cat* Disallow: /*?product_tag* Disallow: /*?source_id* Disallow: /*?orderby* Disallow: /*?product_order* Disallow: /*?product_count* Disallow: /*?page_size* Disallow: /?add-to-cart* Allow: /wp-admin/admin-ajax.php  
      و یا کلا هر چی "؟" داره رو ببندم !؟
      User-agent: * Disallow: /wp-admin/ Disallow: /*?* Allow: /wp-admin/admin-ajax.php و یا نه
      کلا کاری با robots.txt نداشته باشم و توی گوگل تو بخش URL Parameters مشخص کنم که به اینها کاری نداشته باشه ؟ توی این بخش هم تمام پارامترهارو شناخته
      چطور با این نوع duplicate content توی وردپرس برخورد کنیم ؟!
      تصویر url parameter ها
    • توسط parsmelodi
      سلام دوستان کسی فایل robots.txt خوب برای سایت سراغ داره به ما هم بده؟
      واقعا ممنون میشم
      آدرس سایت من  پارس ملودی  http://parsmelodi.com
    • توسط mohandes1900
      یه مشکل بزرگ داره سایتم
      مطالب جدید رو از سایت های خارجی ترجمه میکنیم و توی سایت قرار میدیم حتی عنوان ها هم تو گوگل فارسیشون قبلا نبوده و کلا پست ها خیلی خوبن اما نمیدونم چرا وقتی توی گوگل سرچ میکنیم عنوان پست رو نشون نمیده و فقط با تگ های اون پست میشه پیداش کرد..
      کسی میدونه دلیلش چیه؟
      عکس های پست ها هم نمیاد توی گوگل
    • توسط mohandes1900
      سلام دوستان کسی فایل robots.txt خوب برای سایت سراغ داره به ما هم بده؟
      واقعا ممنون میشم
    • توسط yohana
      سلام دوستان
      وقت بخیر
      آقا فایل robots.txt من تو گوگل ایندکس شده . 
      وقتی از این دستور استفاده می کنم site:www.yoursite.com 
      جزو لینک های ایندکس شده گوگل میاد و روش کلیک میکنم محتویاتش نشون داده میشه .
      اگر توسط خودش از ایندکس شدنش جلوگیری کنم مشکلی یش نمیاد؟