مشاهده نسخه کامل
: اقا این robots.txt یعنی چه؟
اقا این robots.txt یعنی چه؟
مثلا این
[ برای مشاهده لینک ، لطفا با نام کاربری خود وارد شوید یا ثبت نام کنید ]
چی باید گذاشت توش چه فایده ای داره؟
سلام
با استفاده از این فایل شما نحوه و محدوده دسترسی موتورهای جستجو و رباتهای اینترنتی به وب سایت تون رو معین می کنید. هر موتور جستجو در هر مراجعه به وب سایت اول به دنبال فایل robots.txt می گردد و در صورتی که چیزی پیدا نکند به گردش و خزش آزاد و نا محدود خود در سایت شما ادامه خواهد داد و مطالب رو ایندکس خواهد نمود. در واقع بیشتر استفاده امنیتی داره.
[ برای مشاهده لینک ، لطفا با نام کاربری خود وارد شوید یا ثبت نام کنید ]
فایل robots.txt سایت کاخ سفید آمریکا:
[ برای مشاهده لینک ، لطفا با نام کاربری خود وارد شوید یا ثبت نام کنید ]
سلام
با استفاده از این فایل شما نحوه و محدوده دسترسی موتورهای جستجو و رباتهای اینترنتی به وب سایت تون رو معین می کنید. هر موتور جستجو در هر مراجعه به وب سایت اول به دنبال فایل robots.txt می گردد و در صورتی که چیزی پیدا نکند به گردش و خزش آزاد و نا محدود خود در سایت شما ادامه خواهد داد و مطالب رو ایندکس خواهد نمود. در واقع بیشتر استفاده امنیتی داره.
[ برای مشاهده لینک ، لطفا با نام کاربری خود وارد شوید یا ثبت نام کنید ]
فایل robots.txt سایت کاخ سفید آمریکا:
[ برای مشاهده لینک ، لطفا با نام کاربری خود وارد شوید یا ثبت نام کنید ]
پس نگذاریم بهتره
سرچ بهتر میشه
vBulletin , Copyright ©2000-2025, Jelsoft Enterprises Ltd.