فایل robots.txt

سلام.من برای ساختن فایل روبوتز باید آدرس تمام صفحات سایتمو توش بنویسم؟
ممنون.لطفا کامل توضیح بدید

سلام

آدرس هایی که میخواین به جستجوگر معرفی بشه ...
به شما آدرس های زیر رو پیشنهاد میکنم :

• [ برای مشاهده لینک ، با نام کاربری خود وارد شوید یا ثبت نام کنید ]
• [ برای مشاهده لینک ، با نام کاربری خود وارد شوید یا ثبت نام کنید ]
• [ برای مشاهده لینک ، با نام کاربری خود وارد شوید یا ثبت نام کنید ]

تشکر//:40:

شما به سایت

کد:

---

www.cnn.com/robots.txt

---

يا سايت

کد:

---

http://video.alalam-news.com/robots.txt

---

رو ببين اين كامل هست .