رفتن به مطلب

بهترین محتویات برای robots.txt


wp-user

پست های پیشنهاد شده

با سلام

میخواستم بدونم بهترین محتویات برای robots.txt چیه؟

پیرامون سوالم تو انجمن هم گشتم ولی جواب کاملی پیدا نکردم

فقط یه کد بود که خود وردپرس پیشنهاد داده بود یعنی :

http://codex.wordpress.org/Search_Engine_Optimization_for_WordPress#Robots.txt_Optimization

حالا میخوام بدونم از همین برای فایل robots.txt استفاده کنم خوبه یا اینکه چیز دیگه ای رو پیشنهاد میدید؟

یا اگر بهتره که خودم با توجه به سایت خودم اینکارو کنم ، به نظرتون چه قسمت هایی باید اجازه دسترسی نداشته باشن یا به عبارت دیگه چه قسمت هایی رو برو روی Disallow نذارم و چه قسمت هایی رو بر روی Disallow بذارم ؟

لینک به ارسال

Disallow : فايل هايي كه نميخواهيد جستجوگرها ببينند

Sitemap: براي مشاهده سايت مپ به مرورگر

Allow: مشاهده فايل براي مرورگر

لینک به ارسال

ممنون اما من اینارو میدونستم ولی میخوام بدونم بهترین تنظیمات(بهترین حالت دسترسی ها) چیه؟

یعنی بهترین دستوری که میتونم توش بنویسم چیه؟

مثلا این دستوری که خود وردپرس داده خوبه یا باید بسته به نیاز خودم بنویسم ؟

ویرایش شده توسط faver
لینک به ارسال

و لينك هاي زير هم ببينيد خوبه در اوجا بسيار مطرح شده است(جستجو كنيد كمي)


http://forum.wp-parsi.com/topic/12046-%D8%A8%D9%87%D8%AA%D8%B1%DB%8C%D9%86-%D9%86%D9%88%D8%B9-robottxt-%D9%88-%D8%A7%D9%81%D8%B2%D9%88%D9%86%D9%87-%D9%87%D8%A7%DB%8C-%D8%B3%D8%A6%D9%88/

==


http://forum.wp-parsi.com/topic/493-%D8%A8%D9%87%D8%AA%D8%B1%DB%8C%D9%86-%D9%81%D8%A7%DB%8C%D9%84-robotstxt-%D8%A8%D8%B1%D8%A7%DB%8C-%D9%88%D8%B1%D8%AF%D9%BE%D8%B1%D8%B3/

==


http://forum.wp-parsi.com/tutorials/article/54-%D8%A2%D9%85%D9%88%D8%B2%D8%B4-%DA%A9%D8%A7%D9%85%D9%84-%D8%B3%D8%A7%D8%AE%D8%AA-robotstxt/

لینک به ارسال

من مدتی روبوت سایت های اول گوگل رو نگاه کردم

در زمینه های دانلود، عکس، خبر، تفریحی و ...

عموما این بوده:


User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: */feed
Disallow: */page
Disallow: /page/

Sitemap: http://site.ir/sitemap.xml

البته فید و برگه ها دلخواهه

لینک به ارسال

دستورات كاملا واضح هستند يعني

براي پوشه هاي مهم كه حكم مديريت و ... دارند disallow ميزاند(قابل هك هستند) تا از طريق دورك گوگل نتونند پيدا كنند

سايت مپ هم كه تابلو گفته خودش :D

لینک به ارسال

اتفاقا به غیر از لینک اولی دو لینک دوم و سوم رو دیده بودم و به همین دلیل گفتم :

پیرامون سوالم تو انجمن هم گشتم ولی جواب کاملی پیدا نکردم

مثلا تو لینک اول گفته بودن که با چیزی که وردپرس پیشنهاد داده به مشکل برخوردن و یا تو لینک دوم هم باز به پیشنهاد وردپرس اشاره کردن و تو لینک سوم هم فقط آموزش بود. و robots آماده ای قرار نداشت

اما از اینها بگذریم

من خودم دو robots تهیه کردم

ممنون میشم اگر مشکلی داره یا اینکه اگر میتونه بهتر باشه لحاظ کنید

و اینکه به نظرتون کدوم یک از این دو بهتره


User-agent: *
Disallow: /feed/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /wp-content/languages/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /wp-content/upgrade/
Disallow: /wp-content/w3tc-config/
Disallow: /wp-includes/
Disallow: /wp-content/cache/
Sitemap: http://www.site.com/sitemap.xml


User-agent: *
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Allow: /wp-content/uploads/

Sitemap: http://www.site.com/sitemap.xml

ویرایش شده توسط faver
لینک به ارسال

خوب اولي از نظر امنيت خيلي بهتره و جامع تر هست

اما از سئو كامل نيست

لینک به ارسال

تاپیک های مشابه زیادی در موردهمین موضوع زده شده

بهتره اونها رو هم مطالعه کنید

لینک به ارسال

به گفتگو بپیوندید

هم اکنون می توانید مطلب خود را ارسال نمایید و بعداً ثبت نام کنید. اگر حساب کاربری دارید، برای ارسال با حساب کاربری خود اکنون وارد شوید .

مهمان
ارسال پاسخ به این موضوع ...

×   شما در حال چسباندن محتوایی با قالب بندی هستید.   حذف قالب بندی

  تنها استفاده از 75 اموجی مجاز می باشد.

×   لینک شما به صورت اتوماتیک جای گذاری شد.   نمایش به صورت لینک

×   محتوای قبلی شما بازگردانی شد.   پاک کردن محتوای ویرایشگر

×   شما مستقیما نمی توانید تصویر خود را قرار دهید. یا آن را اینجا بارگذاری کنید یا از یک URL قرار دهید.

×
×
  • اضافه کردن...