|
|
Модератор форума: Yuri_G |
Сообщество uCoz » Вебмастеру » Общие вопросы от вебмастеров » Непонятки в robots.txt |
Непонятки в robots.txt |
При вводе к сайту robots.txt выводит мне:
User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /shop/order/ Disallow: /?ssid= Disallow: /abnl/ Disallow: /google Disallow: /twitter Disallow: /facebook Disallow: /yandex Disallow: /vkontakte Sitemap: http://nekrutenko.cf/sitemap.xml Sitemap: http://nekrutenko.cf/sitemap-forum.xml Sitemap: http://nekrutenko.cf/sitemap-shop.xml Что же тогда оно индексирует? |
Поисковый робот индексирует все страницы сайта, за исключением тех, которые указаны после Disallow: |
| |||
| |||