رفتن به مطلب

سوال درباره فایل ربات تکست سایت وردپرس


elahe1

پست های پیشنهاد شده

سلام من تازه عضو انجمن شدم و در مورد فایل ربات تکست سوالی داشتم. به تازگی یک سایت موزیک با هاست و هاست دانلود راه اندازی کردیم و از افزونه سئو ونقشه سایت yoast استفاده میکنیم و میخوام بدونم کدوم برای سایت موزیک بهتره لطفا منو راهنمایی کنید تشکر

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

Sitemap: http://music.ir/sitemap_index.xml

و فایل دوم 


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/cache
Disallow: /trackback
Disallow: /feed
Disallow: */feed
Allow: /wp-content/uploads
Allow: /wp-includes/js/

Sitemap: http://music.ir/sitemap_index.xml

و سوال دیگری هم داشتم و اونم اینکه این دوکد رو به قالب سایت اضافه کردم مشکلی که نداره ؟

<meta name="robots" content="index, follow">
<meta name="googlebot" content="index, follow">

ویرایش شده توسط elahe1
لینک به ارسال

سلام و درود

 

جهت فایل ربات میتونید از کدهای زیر استفاده کنید:

User-agent: *
Disallow: /cgi-bin/
Disallow: /cdn-cgi/
Disallow: /xmlrpc.php
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-*.php
Sitemap: http://music.ir/sitemap_index.xml

در مورد سوال دوم هم اون دو تا متا که قرار دادید بود و نبودشون توی صفحه فرقی نداره چون تمامی صفحات به صورت پیشفرض index, follow هستند.

لینک به ارسال
در 21 دقیقه قبل، elahe1 گفته است :

اقا مهران  میشه یک توضیح مختصری از این فایل بدید که چه فایل هایی توسط ربات ها قرار دیده بشن.

من دانشم پایینه ممنون میشم

خط اول : دستورات زیر برای تمامی ربات هایی هست که از فایل robots.txt پشتیبانی میکنند.

خط دوم : در صورتی از سرویس CDN استفاده کنید مانند سرویس CDN شرکت CloudFlare این ساب فولدر به صورت مجازی اضافه میشود که با این خط دسترسی ربات های موتور جستجو به اون رو مسدود میکنیم.

خط سوم : پوشه cgi-bin که حتما توی پوشه public_html هاستتون میبینیدش برای اجرای زبان های اسکریپتی نظیر C++ ، Perl ، Python و ... مورد استفاده قرار میگیره. که خوب طبق تجربه گاها گوگل به این پوشه گیر میده و واستون دردسر میشه پس بهتره با دستور خط سوم دسترسی بهش رو مسدود کنید.

خط چهارم : xmlrpc یکی از API های ارسال پست و در کل مدیریت وردپرس از راه دور هست و اینجا چون این API مربوط به شما هست و ربطی به ربات ها نداره اومدیم توی خط چهارم مسدودش کردیم.

خط پنجم : تمامی صفحات داشبورد وردپرس در پوشه wp-admin وجود دارد بنابراین این بخش از وردپرس هم مربوط به خود شما میشه و ربطی به بات جستجوگرها نداره در نتیجه با دستور خط 5 ام دسترسی خزنده های موتورهای جستجو به این پوشه رو بستیم.

خط ششم : خوب توی خط 5 ام دسترسی کلی به پوشه wp-admin (خودش و همه فایل هاش) رو بستیم حالا یه فایل از پوشه wp-admin هست که مربوط به کاربران سایت و بات های موتورهای جستجو هم میشه و اونم فایل admin-ajax.php هست که کار اصلیش اینه که درخواست های Ajax به وردپرس رو هندل میکنه. معمولا افزونه های امتیاز دهی ستاره ای به مطالب و همچنین افزونه های لایک مطالب از این فایل استفاده میکنند بنابراین در خط ششم دسترسی به این فایل باز شده که در صورت استفاده از admin-ajax.php در سایتتون اروری در بخش وبمستر تولز موتورهای جستجو براتون پیش نیاد.

خط هفتم : در این خط هدف گذاری بر روی فایل هایی از وردپرس هست که در روت وردپرس قرار دارند یعنی در پوشه های wp-admin و wp-content و wp-includes نیستند. دقیق تر بخوام بگم فایل هایی هستند که نامشون با

wp-

شروع میشه و خارج از 3 پوشه فوق الذکر هستند.

نام این فایل های عبارت است از:

wp-activate.php
wp-blog-header.php
wp-comments-post.php
wp-config-sample.php
wp-config.php
wp-cron.php
wp-links-opml.php
wp-load.php
wp-login.php
wp-mail.php
wp-settings.php
wp-signup.php
wp-trackback.php

که هیچکدام از این فایل ها مربوط به خزنده موتورهای جستجو نمیشه بنابراین در خط هفتم مسدود شده برای خزشگرها.

خط هشتم : در این خط آدرس نقشه سایت به موتورهای جستجو اعلام میشود و توضیح خاصی ندارد.

 

موفق باشید

لینک به ارسال

به گفتگو بپیوندید

هم اکنون می توانید مطلب خود را ارسال نمایید و بعداً ثبت نام کنید. اگر حساب کاربری دارید، برای ارسال با حساب کاربری خود اکنون وارد شوید .

مهمان
ارسال پاسخ به این موضوع ...

×   شما در حال چسباندن محتوایی با قالب بندی هستید.   حذف قالب بندی

  تنها استفاده از 75 اموجی مجاز می باشد.

×   لینک شما به صورت اتوماتیک جای گذاری شد.   نمایش به صورت لینک

×   محتوای قبلی شما بازگردانی شد.   پاک کردن محتوای ویرایشگر

×   شما مستقیما نمی توانید تصویر خود را قرار دهید. یا آن را اینجا بارگذاری کنید یا از یک URL قرار دهید.

×
×
  • اضافه کردن...