بلاک شدن تعداد بسیاری از آدرس ها توسط robot.txt

[buzz 65]

ببخشید

من قبلا از نقشه ساز sitemap.xml استفاده می کردم . بعدا به پیشنهاد یکی از دوستان افزونه Seo Yoast رو نصب و نقشه ی قبلی رو از google webmaster حذف و نقشه های ساخته شده توسط Yoast رو قرار دادم.

اما الان حدود 10512 آدرس توسط robotext بلاک شده و الان هم گوگل خطای زیر رو داده

Over the last 24 hours, Googlebot encountered 124 errors while attempting to access your robots.txt. To ensure that we didn't crawl any pages listed in that file, we postponed our crawl. Your site's overall robots.txt error rate is 3.3%.

نقشه های ساخته شده ، توسط Yoast

- /category-sitemap.xml

- /pishkhan-sitemap.xml

- /post-sitemap1.xml

- post-sitemap2.xml

post-sitemap3.xml

post-sitemap4.xml

- /post_tag-sitemap.xml

که نقشه /post-sitemap1.xml حدود 627 آدرس توسط robot.txt بلاک شده

در فایل robot.txt وب سایتم هم نگاه کردم ، نقشه ی sitemap.xml رو اجازه داده بود که گوگل در اون جست و جو کنه ولی نامی از دیگر نشقه های جدید که درست شده بود نبود.

ورودی گوگل هم بعد از حذف نقشه ی قبلی خیلی کم شده

با تشکر

[imanfakhar 26231]

خوب باید فایل روبو تکست رو هم اصلاح کنید برای همنه نقشه های مجاز مثلا نقشه ی پیشخوان قاعدتا باید غیر مجاز باشه برای اصلاح

http://forum.wp-pars...8%aa-robotstxt/

رو بخونید در ضمن تایپیک شما آموزشی نیست

منتقل شد