elahe1

سوال درباره فایل ربات تکست سایت وردپرس

6 پست در این موضوع قرار دارد

ارسال شده در (ویرایش شده)

سلام من تازه عضو انجمن شدم و در مورد فایل ربات تکست سوالی داشتم. به تازگی یک سایت موزیک با هاست و هاست دانلود راه اندازی کردیم و از افزونه سئو ونقشه سایت yoast استفاده میکنیم و میخوام بدونم کدوم برای سایت موزیک بهتره لطفا منو راهنمایی کنید تشکر

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# Google Image
User-agent: Googlebot-Image
Disallow:
Allow: /*

Sitemap: http://music.ir/sitemap_index.xml

و فایل دوم 


User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/cache
Disallow: /trackback
Disallow: /feed
Disallow: */feed
Allow: /wp-content/uploads
Allow: /wp-includes/js/

Sitemap: http://music.ir/sitemap_index.xml

و سوال دیگری هم داشتم و اونم اینکه این دوکد رو به قالب سایت اضافه کردم مشکلی که نداره ؟

<meta name="robots" content="index, follow">
<meta name="googlebot" content="index, follow">

ویرایش شده در توسط elahe1
0

به اشتراک گذاری این پست


لینک به پست

سلام و درود

 

جهت فایل ربات میتونید از کدهای زیر استفاده کنید:

User-agent: *
Disallow: /cgi-bin/
Disallow: /cdn-cgi/
Disallow: /xmlrpc.php
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-*.php
Sitemap: http://music.ir/sitemap_index.xml

در مورد سوال دوم هم اون دو تا متا که قرار دادید بود و نبودشون توی صفحه فرقی نداره چون تمامی صفحات به صورت پیشفرض index, follow هستند.

2

به اشتراک گذاری این پست


لینک به پست

اقا مهران  میشه یک توضیح مختصری از این فایل بدید که چه فایل هایی توسط ربات ها قرار دیده بشن.

من دانشم پایینه ممنون میشم

0

به اشتراک گذاری این پست


لینک به پست
در 21 دقیقه قبل، elahe1 گفته است :

اقا مهران  میشه یک توضیح مختصری از این فایل بدید که چه فایل هایی توسط ربات ها قرار دیده بشن.

من دانشم پایینه ممنون میشم

خط اول : دستورات زیر برای تمامی ربات هایی هست که از فایل robots.txt پشتیبانی میکنند.

خط دوم : در صورتی از سرویس CDN استفاده کنید مانند سرویس CDN شرکت CloudFlare این ساب فولدر به صورت مجازی اضافه میشود که با این خط دسترسی ربات های موتور جستجو به اون رو مسدود میکنیم.

خط سوم : پوشه cgi-bin که حتما توی پوشه public_html هاستتون میبینیدش برای اجرای زبان های اسکریپتی نظیر C++ ، Perl ، Python و ... مورد استفاده قرار میگیره. که خوب طبق تجربه گاها گوگل به این پوشه گیر میده و واستون دردسر میشه پس بهتره با دستور خط سوم دسترسی بهش رو مسدود کنید.

خط چهارم : xmlrpc یکی از API های ارسال پست و در کل مدیریت وردپرس از راه دور هست و اینجا چون این API مربوط به شما هست و ربطی به ربات ها نداره اومدیم توی خط چهارم مسدودش کردیم.

خط پنجم : تمامی صفحات داشبورد وردپرس در پوشه wp-admin وجود دارد بنابراین این بخش از وردپرس هم مربوط به خود شما میشه و ربطی به بات جستجوگرها نداره در نتیجه با دستور خط 5 ام دسترسی خزنده های موتورهای جستجو به این پوشه رو بستیم.

خط ششم : خوب توی خط 5 ام دسترسی کلی به پوشه wp-admin (خودش و همه فایل هاش) رو بستیم حالا یه فایل از پوشه wp-admin هست که مربوط به کاربران سایت و بات های موتورهای جستجو هم میشه و اونم فایل admin-ajax.php هست که کار اصلیش اینه که درخواست های Ajax به وردپرس رو هندل میکنه. معمولا افزونه های امتیاز دهی ستاره ای به مطالب و همچنین افزونه های لایک مطالب از این فایل استفاده میکنند بنابراین در خط ششم دسترسی به این فایل باز شده که در صورت استفاده از admin-ajax.php در سایتتون اروری در بخش وبمستر تولز موتورهای جستجو براتون پیش نیاد.

خط هفتم : در این خط هدف گذاری بر روی فایل هایی از وردپرس هست که در روت وردپرس قرار دارند یعنی در پوشه های wp-admin و wp-content و wp-includes نیستند. دقیق تر بخوام بگم فایل هایی هستند که نامشون با

wp-

شروع میشه و خارج از 3 پوشه فوق الذکر هستند.

نام این فایل های عبارت است از:

wp-activate.php
wp-blog-header.php
wp-comments-post.php
wp-config-sample.php
wp-config.php
wp-cron.php
wp-links-opml.php
wp-load.php
wp-login.php
wp-mail.php
wp-settings.php
wp-signup.php
wp-trackback.php

که هیچکدام از این فایل ها مربوط به خزنده موتورهای جستجو نمیشه بنابراین در خط هفتم مسدود شده برای خزشگرها.

خط هشتم : در این خط آدرس نقشه سایت به موتورهای جستجو اعلام میشود و توضیح خاصی ندارد.

 

موفق باشید

2

به اشتراک گذاری این پست


لینک به پست

ممنون که بصورت مفصل توضیح دادید 

1

به اشتراک گذاری این پست


لینک به پست
در هم اکنون، elahe1 گفته است :

ممنون که بصورت مفصل توضیح دادید 

خواهش میکنم.

1

به اشتراک گذاری این پست


لینک به پست

برای ارسال نظر یک حساب کاربری ایجاد کنید یا وارد حساب خود شوید

برای اینکه بتوانید نظر ارسال کنید نیاز دارید که کاربر سایت شوید

ایجاد یک حساب کاربری

برای حساب کاربری جدید در انجمن ما ثبت نام کنید. عضویت خیلی ساده است !


ثبت نام یک حساب کاربری جدید

ورود به حساب کاربری

دارای حساب کاربری هستید؟ از اینجا وارد شوید


ورود به حساب کاربری