سوال در مورد فایل robots.txt

[Seyed Ali 22]

سلام دوستان

این کد هائیه که تو فایل روبوت سایتم هستم

میشه یه نگاهی بکنید ببینید مشکلی نداره؟

# All Bots
User-agent: *
Disallow: /readme.html
Disallow: /license.txt
Disallow: /search/
Disallow: /*?
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.wmv$
Disallow: /*.cgi$
Disallow: /*.xhtml$
Disallow: /*rurl=*
Allow: /sitemap.xml.gz$

# Sitemap
Sitemap: http://razva.ir/sitemap.xml.gz

[omid0098i 2536]

سلام

نه مشکلی نداره - میتونید # All Bots رو حذف کنید .

و همچنین دو فایل زیر رو میتونید حذف کنید از روی هاستتون و از صفحه ی روبوت نیز حذف ....

Disallow: /readme.html

Disallow: /license.txt

در کل مشکلی نداره

موفق باشید