رفتن به مطلب

عدم دسترسی ربات گوگل به بعضی از فایل های js


پست های پیشنهاد شده

با سلام

در گوگل وبمستر هر چند روز بخش blocked resources چند تا فایل جدید از پوشه wp-includes را نشان می دهد که بهش دسترسی ندارد و بعضی از ادرس های سایت برای گوگل بلوکه می شود.

حدود 400 ادرس توسط امارگیر histats بلاک شده بود که مجبور شدم امارگیر را بردارم. در قسمت robots.txt اصلا دسترسی ربات را به پوشه wp-includes و wp-content محدود نکردم ولی در تصویر زیر می بینید که به بعضی از فایل های js گیر داده.

 

1.thumb.png.c7ab7e993e123e70d2ee77cc5dae1a77.png

محتویات robots.txt:

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Allow: /wp-content/uploads/dynamic_avia/enfold.css

Allow: /$
Sitemap: https://www.acgih.ir/sitemap_index.xml
Sitemap: https://www.acgih.ir/post-sitemap1.xml
Sitemap: https://www.acgih.ir/post-sitemap2.xml
Sitemap: https://www.acgih.ir/post-sitemap3.xml
Sitemap: https://www.acgih.ir/page-sitemap.xml
Sitemap: https://www.acgih.ir/attachment-sitemap1.xml
Sitemap: https://www.acgih.ir/attachment-sitemap2.xml
Sitemap: https://www.acgih.ir/attachment-sitemap3.xml
Sitemap: https://www.acgih.ir/category-sitemap.xml
Sitemap: https://www.acgih.ir/post_tag-sitemap1.xml
Sitemap: https://www.acgih.ir/post_tag-sitemap2.xml
Sitemap: https://www.acgih.ir/post_tag-sitemap3.xml
Sitemap: https://www.acgih.ir/post_tag-sitemap4.xml
Sitemap: https://www.acgih.ir/post_tag-sitemap5.xml
Sitemap: https://www.acgih.ir/post_tag-sitemap6.xml
Sitemap: https://www.acgih.ir/post_tag-sitemap7.xml
Sitemap: https://www.acgih.ir/post_tag-sitemap8.xml
Sitemap: https://www.acgih.ir/product-sitemap.xml
Sitemap: https://www.acgih.ir/product_cat-sitemap.xml
Sitemap: https://www.acgih.ir/product_tag-sitemap.xml

 

لینک به ارسال

سلام و درود

 

فایل ربات سایتتون رو مثل زیر کنید.

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://www.acgih.ir/sitemap_index.xml

بعد یه سوال هم دارم در قسمت تنظیمات وردپرس بخش تنظیمات همگانی آیا آدرس سایتتون با https هست؟

لینک به ارسال
در 21 دقیقه قبل، naghmesara گفته است :

سلام و درود

 

فایل ربات سایتتون رو مثل زیر کنید.


User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://www.acgih.ir/sitemap_index.xml

بعد یه سوال هم دارم در قسمت تنظیمات وردپرس بخش تنظیمات همگانی آیا آدرس سایتتون با https هست؟

بله به صورت https ذخیره کردم.

ببخشید قبلا به همین صورت بود ولی گوگل به فایل enfold.css گیرد داد و حدود 400 ادرس را بلوک کرد و من مجبور شدم مسیر این فایل را در گوگل روبوت به صورت دستی allow کنم هرچند اگه این مسیر ها را disallow نکنی باید گوگل همشو allow شده ببینه

ویرایش شده توسط sir1
لینک به ارسال

درود مجدد

 

شما فعلا فایل ربات رو به اون موردی که گفتم تغییر بدید.

نقل قول

خب چاره کار چیه؟ حتما باید مسیر های wp-content  و wp-includes را allow کنم؟؟

Allow فایل ربات فقط زمانی کاربرد داره که کل یه دایرکتوری رو disallow کردید و حالا میخواید یه فایل از اون دایرکتوری رو دسترسیش رو باز کنید مثلا در خط 2 و 3 فایل رباتتون این اتفاق افتاده.

والا گوگل نمیگه چرا نمیتونه ببینه این بخش ها رو فقط اشاره میکنه که قابل رویت نیست. از بخش موبایل فرندلی گوگل هم میتونید ببینید که در صفحه اصلی شما بالای 30 فایل رو گوگل بهش دسترسی نداره و علت هم مشخص نیست.

ویرایش شده توسط naghmesara
لینک به ارسال

درود مجدد

 

اینطور که مشخصه علت عدم دسترسی ربطی به فایل ربات نداره چون اگر ربط داشت در بخش موبایل فرندلی همچین چیزی رو می دیدیم.

1.jpg.e2fc46b3bf336706bc70d93e2ac95cac.jpg

لینک به ارسال
در 6 دقیقه قبل، naghmesara گفته است :

درود مجدد

 

اینطور که مشخصه علت عدم دسترسی ربطی به فایل ربات نداره چون اگر ربط داشت در بخش موبایل فرندلی همچین چیزی رو می دیدیم.

1.jpg.e2fc46b3bf336706bc70d93e2ac95cac.jpg

 

در ۱ ساعت قبل، naghmesara گفته است :

درود مجدد

 

شما فعلا فایل ربات رو به اون موردی که گفتم تغییر بدید.

Allow فایل ربات فقط زمانی کاربرد داره که کل یه دایرکتوری رو disallow کردید و حالا میخواید یه فایل از اون دایرکتوری رو دسترسیش رو باز کنید مثلا در خط 2 و 3 فایل رباتتون این اتفاق افتاده.

والا گوگل نمیگه چرا نمیتونه ببینه این بخش ها رو فقط اشاره میکنه که قابل رویت نیست. از بخش موبایل فرندلی گوگل هم میتونید ببینید که در صفحه اصلی شما بالای 30 فایل رو گوگل بهش دسترسی نداره و علت هم مشخص نیست.

اگه به صورت RegEx تمامی فایل های js و css را allow کنم به صورت زیر امکان داره که مشکل حل بشه؟

چون ربات گوگل به طریقی به این فایلها دسترسی نداره حالا مشخص نیست.

Allow: /*.js$
Allow: /*.css$

 

لینک به ارسال

درود مجدد

 

در هم اکنون، sir1 گفته است :

 

اگه به صورت RegEx تمامی فایل های js و css را allow کنم به صورت زیر امکان داره که مشکل حل بشه؟

چون ربات گوگل به طریقی به این فایلها دسترسی نداره حالا مشخص نیست.


Allow: /*.js$
Allow: /*.css$

 

مشکلی نداره میشه این دو مورد هم البته به شکل زیر به فایل ربات اضافه کنید.

Allow: /*.js
Allow: /*.css

$ در ریجکس به معنی انتهای رشته است ولی چون شما اروهایی که در وبمستر دریافت کردید میشه گفت همشون با js یا css خاتمه پیدا نمیکنند و بعد از فرمت فایل با یک کوئری استرینگ ورژن اسکریپت یا استایل نوشته شده پس نباید از $ استفاده کنید.

 

ولی فک نکنم با این مورد هم ارورها رفع بشه. نتیجه بلافاصله بعد از اضافه کردن این کدها در فایل ربات در بخش موبایل فرندلی گوگل قابل مشاهده هست.

 

موفق باشید

لینک به ارسال
در ۱ ساعت قبل، naghmesara گفته است :

درود مجدد

 

مشکلی نداره میشه این دو مورد هم البته به شکل زیر به فایل ربات اضافه کنید.


Allow: /*.js
Allow: /*.css

$ در ریجکس به معنی انتهای رشته است ولی چون شما اروهایی که در وبمستر دریافت کردید میشه گفت همشون با js یا css خاتمه پیدا نمیکنند و بعد از فرمت فایل با یک کوئری استرینگ ورژن اسکریپت یا استایل نوشته شده پس نباید از $ استفاده کنید.

 

ولی فک نکنم با این مورد هم ارورها رفع بشه. نتیجه بلافاصله بعد از اضافه کردن این کدها در فایل ربات در بخش موبایل فرندلی گوگل قابل مشاهده هست.

 

موفق باشید

این سه فایل زیر مهم هستند و هم در گوگل وبمستر و هم در مبایل فرندلی ارور گرفته اند. البته تعداد فایل های گوگل وبمستر بیشتر هستند ولی این سه تا بینشون مشترک است.

https://www.acgih.ir/?wc-ajax=get_refreshed_fragments
https://www.acgih.ir/wp-admin/admin-ajax.php
https://www.acgih.ir/wp-includes/js/wp-emoji-release.min.js?ver=4.8

فایل https://www.acgih.ir/wp-admin/admin-ajax.php با دادن دسترسی allow تعداد لینک هایی که بلاک شده بود روز به روز کمتر میشه

لینک به ارسال

با سلام مجدد.

مهندس این دستور را در فایل روبوت وارد کردم الان در گوگل فرندلی هیچ فایلی نیست که لود نشه و خطایی ثبت نشده.

User-agent: *
Allow: /

Sitemap: https://www.acgih.ir/sitemap_index.xml

این احتمال وجود داره که ادرس هایی که بلاک شده در گوگل ومستر اوکی بشن؟؟

لینک به ارسال

درود مجدد

 

خیر ارورها هست ولی تعدادشون کم و زیاد میشه.

احتمالا مشکل وب سروری هست.

ویرایش شده توسط naghmesara
جواب نادرست
لینک به ارسال
در 7 دقیقه قبل، naghmesara گفته است :

درود مجدد

 

والا واسه من هنوز این 3 تا فایل رو ارور نشون داد بخش موبایل فرندلی.

1.jpg.b1c458fc72d70fc0caecc06996e035f4.jpg

ولی خوب پیشرفت خوبی بود.

 

البته مورد عجیبیه چون دستوری که نوشتید توی فایل ربات به صورت پیشفرض برقرار است.

این لینکیه که تازه تست کردم و موردی نبود:

https://search.google.com/test/mobile-friendly?id=bZzueHJoVSbe9apZZTodjQ&view=fetch-info

البته دو سه مورد که چک کردم حق با شماست و به دو سه فایل گیر میده. اگه این دو سه مورد فقط باشه مشکل حل شده.

یک احتمال دیگه میگم که باعث ایجاد همچین مشکلی شده که در مطلب زیر گفتم:

 

لینک به ارسال

درود مجدد

 

در ۱ ساعت قبل، sir1 گفته است :

این لینکیه که تازه تست کردم و موردی نبود:

https://search.google.com/test/mobile-friendly?id=bZzueHJoVSbe9apZZTodjQ&view=fetch-info

البته دو سه مورد که چک کردم حق با شماست و به دو سه فایل گیر میده. اگه این دو سه مورد فقط باشه مشکل حل شده.

یک احتمال دیگه میگم که باعث ایجاد همچین مشکلی شده که در مطلب زیر گفتم:

 

بله الان مجدد بررسی کردم متوجه شدم که رفع شده انگار ارورها.

لینک به ارسال

به گفتگو بپیوندید

هم اکنون می توانید مطلب خود را ارسال نمایید و بعداً ثبت نام کنید. اگر حساب کاربری دارید، برای ارسال با حساب کاربری خود اکنون وارد شوید .

مهمان
ارسال پاسخ به این موضوع ...

×   شما در حال چسباندن محتوایی با قالب بندی هستید.   حذف قالب بندی

  تنها استفاده از 75 اموجی مجاز می باشد.

×   لینک شما به صورت اتوماتیک جای گذاری شد.   نمایش به صورت لینک

×   محتوای قبلی شما بازگردانی شد.   پاک کردن محتوای ویرایشگر

×   شما مستقیما نمی توانید تصویر خود را قرار دهید. یا آن را اینجا بارگذاری کنید یا از یک URL قرار دهید.

×
×
  • اضافه کردن...