رفتن به مطلب

این لینک های بلاک شده در گوگل وب مستر تولز به چه دلیل هستن؟


samaram

پست های پیشنهاد شده

این تصویر رو ببینید لطفا:

8rrev5lp0x4cris0x6mt.png

من چند وقت پیش ساختار لینک ها رو تغییر دادم. این خطاها مال اونه؟

باید تا ایندکس دوباره صبر کنم؟ نباید در گوگل وب مستر تولز کار دیگه ای انجام بدم؟ فقط منتظر ایندکس دوباره بمونم؟

لینک به ارسال

آدرس سایتتون رو خط زدید !

در صورتی که تغییرات جدید شما در سایت مپ اعمال شده است ؛

بلی بایستی حداقل 1 هفته منتظر اعمال تغییرات باشید .

لینک به ارسال

سلام ، فایل robots.txt خودتون رو اینجا قرار بدید ، فراموش نکنید که wp-includes و هیچ چیز دیگه ای نباید بسته بشه توی robots.txt و فایل robots.txt باید به شکل زیر باشه:

User-agent: *
Disallow: /wp-admin/
Sitemap: http://site.com/sitemap.xml

چون در تغییرات گوگل اعلام شده که هیچ فایل js و css نباید دسترسیش قطع شده باشه و شما اینکار رو با robots.txtـتون کردین (تمامی فایل های ربات مربوط به سالیان گذشته کاملاً منقضی شدن و دیگه نباید wp-includes و wp-content به جز uploads رو ببندید)

لینک به ارسال
  • 4 هفته بعد...

سلام ، فایل robots.txt خودتون رو اینجا قرار بدید ، فراموش نکنید که wp-includes و هیچ چیز دیگه ای نباید بسته بشه توی robots.txt و فایل robots.txt باید به شکل زیر باشه:

User-agent: *
Disallow: /wp-admin/
Sitemap: http://site.com/sitemap.xml

چون در تغییرات گوگل اعلام شده که هیچ فایل js و css نباید دسترسیش قطع شده باشه و شما اینکار رو با robots.txtـتون کردین (تمامی فایل های ربات مربوط به سالیان گذشته کاملاً منقضی شدن و دیگه نباید wp-includes و wp-content به جز uploads رو ببندید)

متشکر

الان محتویات فایل robots به این شکله:


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*
Sitemap: http://www.mysite.ir/sitemap_index.xml

یعنی همه ی اینا رو پاک کنم و بجاش همون سه خطی که شما فرمودید رو بذارم؟

لینک به ارسال

متشکر

الان محتویات فایل robots به این شکله:


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads
# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*
Sitemap: http://www.mysite.ir/sitemap_index.xml

یعنی همه ی اینا رو پاک کنم و بجاش همون سه خطی که شما فرمودید رو بذارم؟

نه نه ! منظور دوستمون پوشه wp-include بود که شما با روبات Disallow کردی.

لینک به ارسال
نه نه ! منظور دوستمون پوشه wp-include بود که شما با روبات Disallow کردی.

بله پاک کنید مشکلی پیش نمیاد. توی فایلی که شما دارین علاوه بر wp-includes که نباید بسته باشه plugins و themes هم بسته شده ، بقیّه آدرس ها هم بود و نبودشون لزومی نداره ، بستگی به سایت شما داره و متأسفانه ما فکر میکنیم که robots.txt یه چیز پیشفرض باید باشه... با وجود اینکه برعکس ، برای هر سایتی فرق میکنه که چه آدرس هایی باید بسته یا باز باشه ، در کل همون 3 خطی که من دادم کفایت میکنه به صورت پیشفرض و مشکلی پیش نمیاد.

لینک به ارسال
  • 2 هفته بعد...

سلام ، فایل robots.txt خودتون رو اینجا قرار بدید ، فراموش نکنید که wp-includes و هیچ چیز دیگه ای نباید بسته بشه توی robots.txt و فایل robots.txt باید به شکل زیر باشه:

User-agent: *
Disallow: /wp-admin/
Sitemap: http://site.com/sitemap.xml

چون در تغییرات گوگل اعلام شده که هیچ فایل js و css نباید دسترسیش قطع شده باشه و شما اینکار رو با robots.txtـتون کردین (تمامی فایل های ربات مربوط به سالیان گذشته کاملاً منقضی شدن و دیگه نباید wp-includes و wp-content به جز uploads رو ببندید)

جناب آقای زینلی واقعا" ممنون بابت توضیح خوبی که دادید من وردی گوگلم از اول اکتبر حدود 40-50 درصد افت کرده الان هم هنوز سایتم داره از فایل های ربات قدیمی استفاده می کنه آیا ممکنه به خاطر این مساله ترافیک گوگل پایین اومده باشه؟

من فایل رباتی که استفاده می کنم اینجا می زارم می شه لطفا" راهنمایی کنید من باید چه تغییری توش بدم؟


#######################################################
#TCJ Robots
# All Bots
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /wp-content/
Disallow:/wp-content/themes
Disallow:/wp-content/upgrade
Disallow:/wp-content/plugins
Disallow:wp-content/cache
Disallow:/wp-content/bps-backup
Disallow:/wp-content/languages
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /wp-
Disallow: /trackback
Disallow: /trackback/
Disallow: */trackback/*
Disallow: /*/trackback/$
Disallow: /author
Disallow: /wget/
Disallow: /httpd/
Disallow: /cgi-bin
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /search
Disallow: /feed
Disallow: /feed/
Disallow: /rss
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /useronline/
Disallow: /*?
Disallow: /*.xhtml$
Disallow: /stats*
Disallow: /about/legal-notice/
Disallow: /about/copyright-policy/
Disallow: /about/terms-and-conditions/
Disallow: /docs*
Disallow: /manual*
Disallow: /category/uncategorized*
Disallow: /bargozari
Disallow: /graphic
Disallow: /error_log
Disallow: /php.ini
Disallow: /xmlrpc.php
Allow: /wp-content/uploads/*.gif
Allow: /wp-content/uploads/*.png
Allow: /wp-content/uploads/*.jpg
Allow: /sitemap.xml.gz$
# Dugg Mirror
User-agent: duggmirror
Disallow: /
# disallow files ending with the following extensions
User-agent: Googlebot
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.cgi$
Disallow: /*.wmv$
Disallow: /*.php*
Disallow: /*.gz$
# Google AdSense
User-agent: Mediapartners-Google
Disallow:
#disallow WayBack archiving site
User-agent: ia_archiver
Disallow: /
# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://website.com/sitemap.xml
# END XML-SITEMAP-PLUGIN
#######################################################[/left]


[left]

لینک به ارسال

جناب آقای زینلی واقعا" ممنون بابت توضیح خوبی که دادید من وردی گوگلم از اول اکتبر حدود 40-50 درصد افت کرده الان هم هنوز سایتم داره از فایل های ربات قدیمی استفاده می کنه آیا ممکنه به خاطر این مساله ترافیک گوگل پایین اومده باشه؟

من فایل رباتی که استفاده می کنم اینجا می زارم می شه لطفا" راهنمایی کنید من باید چه تغییری توش بدم؟


#######################################################
#TCJ Robots
# All Bots
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /wp-content/
Disallow:/wp-content/themes
Disallow:/wp-content/upgrade
Disallow:/wp-content/plugins
Disallow:wp-content/cache
Disallow:/wp-content/bps-backup
Disallow:/wp-content/languages
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /wp-
Disallow: /trackback
Disallow: /trackback/
Disallow: */trackback/*
Disallow: /*/trackback/$
Disallow: /author
Disallow: /wget/
Disallow: /httpd/
Disallow: /cgi-bin
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /search
Disallow: /feed
Disallow: /feed/
Disallow: /rss
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /useronline/
Disallow: /*?
Disallow: /*.xhtml$
Disallow: /stats*
Disallow: /about/legal-notice/
Disallow: /about/copyright-policy/
Disallow: /about/terms-and-conditions/
Disallow: /docs*
Disallow: /manual*
Disallow: /category/uncategorized*
Disallow: /bargozari
Disallow: /graphic
Disallow: /error_log
Disallow: /php.ini
Disallow: /xmlrpc.php
Allow: /wp-content/uploads/*.gif
Allow: /wp-content/uploads/*.png
Allow: /wp-content/uploads/*.jpg
Allow: /sitemap.xml.gz$
# Dugg Mirror
User-agent: duggmirror
Disallow: /
# disallow files ending with the following extensions
User-agent: Googlebot
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.cgi$
Disallow: /*.wmv$
Disallow: /*.php*
Disallow: /*.gz$
# Google AdSense
User-agent: Mediapartners-Google
Disallow:
#disallow WayBack archiving site
User-agent: ia_archiver
Disallow: /
# BEGIN XML-SITEMAP-PLUGIN
Sitemap: http://website.com/sitemap.xml
# END XML-SITEMAP-PLUGIN
#######################################################[/left]
[left]

ببینید بعضی ها فکر میکنند که هرچقدر شما سایتتون robots.txt بلند تری داشته باشن سایتشون موفّق تر خواهد بود ، ولی بر خلاف این نظریه نگاه کنید مثلاً سایت دانلود ها که سئو شده فایل رباتش چقدره؟

http://downloadha.com/robots.txt

یا سایت راسخون (که البتّه با وردپرس نیست) فقط allow داده:

https://rasekhoon.net/robots.txt

یا p30download تنها و تنها صفحات سرچ و کوئری استرینگ دارش (صفحاتی که اطلّاعات رو از طریق متود get میفرستن ، مثل صفحات جستجو که با s= هستند یا صفحات ریدایرکت که با go= هستند) و فایل های دانلودیش رو بسته:

http://p30download.com/robots.txt

_______________

ببینید من یه بار دیگه هم گفتم گوگل که بیکار نیست بیاد بعد آدرس شما هرآدرسی رو بذاره و اون رو بخواد ایندکس کنه ، برای اینکه گوگل یه صفحه ای رو ببینه اوّل باید بهش معرفی بشه! بعدش هم صفحه ای که خالیه آخه چطوری گوگل میخواد ایندکسش کنه که دسترسی هاش رو میبندین؟ :|

توی فایل ربات شما فایل های CSS و JS هم بسته هستن که باعث خطای گوگل میشه (Blocked Resources) و ممکنه اگر تعداد این ریسورس ها بالا بره گوگل حساس بشه در پایان ، برای سایت شما نتیجه مضر داشته باشه.

لینک به ارسال

ببینید بعضی ها فکر میکنند که هرچقدر شما سایتتون robots.txt بلند تری داشته باشن سایتشون موفّق تر خواهد بود ، ولی بر خلاف این نظریه نگاه کنید مثلاً سایت دانلود ها که سئو شده فایل رباتش چقدره؟

http://downloadha.com/robots.txt

یا سایت راسخون (که البتّه با وردپرس نیست) فقط allow داده:

https://rasekhoon.net/robots.txt

یا p30download تنها و تنها صفحات سرچ و کوئری استرینگ دارش (صفحاتی که اطلّاعات رو از طریق متود get میفرستن ، مثل صفحات جستجو که با s= هستند یا صفحات ریدایرکت که با go= هستند) و فایل های دانلودیش رو بسته:

http://p30download.com/robots.txt

_______________

ببینید من یه بار دیگه هم گفتم گوگل که بیکار نیست بیاد بعد آدرس شما هرآدرسی رو بذاره و اون رو بخواد ایندکس کنه ، برای اینکه گوگل یه صفحه ای رو ببینه اوّل باید بهش معرفی بشه! بعدش هم صفحه ای که خالیه آخه چطوری گوگل میخواد ایندکسش کنه که دسترسی هاش رو میبندین؟ :|

توی فایل ربات شما فایل های CSS و JS هم بسته هستن که باعث خطای گوگل میشه (Blocked Resources) و ممکنه اگر تعداد این ریسورس ها بالا بره گوگل حساس بشه در پایان ، برای سایت شما نتیجه مضر داشته باشه.

ممنون بابت توضیحتون

همون فایل رباتی را که اینجا معرفی کرده بودید گذاشتم رو سایت ..

لینک به ارسال

ببینید بعضی ها فکر میکنند که هرچقدر شما سایتتون robots.txt بلند تری داشته باشن سایتشون موفّق تر خواهد بود ، ولی بر خلاف این نظریه نگاه کنید مثلاً سایت دانلود ها که سئو شده فایل رباتش چقدره؟

http://downloadha.com/robots.txt

یا سایت راسخون (که البتّه با وردپرس نیست) فقط allow داده:

https://rasekhoon.net/robots.txt

یا p30download تنها و تنها صفحات سرچ و کوئری استرینگ دارش (صفحاتی که اطلّاعات رو از طریق متود get میفرستن ، مثل صفحات جستجو که با s= هستند یا صفحات ریدایرکت که با go= هستند) و فایل های دانلودیش رو بسته:

http://p30download.com/robots.txt

_______________

ببینید من یه بار دیگه هم گفتم گوگل که بیکار نیست بیاد بعد آدرس شما هرآدرسی رو بذاره و اون رو بخواد ایندکس کنه ، برای اینکه گوگل یه صفحه ای رو ببینه اوّل باید بهش معرفی بشه! بعدش هم صفحه ای که خالیه آخه چطوری گوگل میخواد ایندکسش کنه که دسترسی هاش رو میبندین؟ :|

توی فایل ربات شما فایل های CSS و JS هم بسته هستن که باعث خطای گوگل میشه (Blocked Resources) و ممکنه اگر تعداد این ریسورس ها بالا بره گوگل حساس بشه در پایان ، برای سایت شما نتیجه مضر داشته باشه.

من توصیه های خود گوگل را می خونم می بینم تا الان عجب اشتباهی می کردم ... انصافا" این راهنماییتون خیلی به درد من خورد

گوگل مرتب تو جاهای مختلف در مورد در دسترس بود فایل های CSS و JS توصیه کرده

فقط سوالی که دارم در مورد بنر های تبلیغاتی و popunder روی سایته آیا باید اینها را توی robot.txt مسدود کرد؟

خود گوگل تو این لینک تو قسمت technical guidelines یک چیزهایی گفته

https://support.google.com/webmasters/answer/35769?hl=en#3

اگر لازمه که تبلیغات بسته بشن با چه دستوری باید این کار را بکنیم؟

لینک به ارسال

به گفتگو بپیوندید

هم اکنون می توانید مطلب خود را ارسال نمایید و بعداً ثبت نام کنید. اگر حساب کاربری دارید، برای ارسال با حساب کاربری خود اکنون وارد شوید .

مهمان
ارسال پاسخ به این موضوع ...

×   شما در حال چسباندن محتوایی با قالب بندی هستید.   حذف قالب بندی

  تنها استفاده از 75 اموجی مجاز می باشد.

×   لینک شما به صورت اتوماتیک جای گذاری شد.   نمایش به صورت لینک

×   محتوای قبلی شما بازگردانی شد.   پاک کردن محتوای ویرایشگر

×   شما مستقیما نمی توانید تصویر خود را قرار دهید. یا آن را اینجا بارگذاری کنید یا از یک URL قرار دهید.

×
×
  • اضافه کردن...