فایل robots.txt

[ali-span 7]

سلام

میخام گوگل یک صفحه را در تالار (http://www.panje.net/forum/forum-74084.html) را ایندکس نکنه و کد زیر را در robots.txt گزاشتم کد درست هست؟

Disallow: http://www.panje.net/forum/forum-74084.html

[فرهاد-سئو 905]

طبق گفته سایت robotstxt.org باید به این صورت دستور را وارد نمائید :

User-agent: *
Disallow: /~joe/junk.html
Disallow: /~joe/foo.html
Disallow: /~joe/bar.html

[ali-span 7]

یعنی

اینطوری

Disallow: /forum/forum-74084.html

[فرهاد-سئو 905]

بله باید همونطوری که گفتین وارد کنین

در اصل نباید دامین رو بنویسید چون وقتی / اسلش رو قبل ادرس میزارین به معنای روت هست