Страница 136 из 136«12134135136
Модератор форума: Yuri_G 
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
DENIS5083
Сообщений: 16
Репутация: 0

Сообщение # 2026 | 13:02:34
так я вопрос задал что у меня в роботе вот так это норм или нет
User-agent: *
Sitemap: http://ucoz.ru/sitemap.xml
Host: ucoz.ru
сайт может быть любой
@katy@
Сообщений: 1801
Репутация: 466
Уровень замечаний:

Сообщение # 2027 | 13:20:03
Цитата DENIS5083 ()
так я вопрос задал что у меня в роботе вот так это норм или нет


DENIS5083, это не нормально. Вверху все ссылки по созданию правильного robots.txt информация

道德經 Помощь по системе
kakbctapoucka3ke2012
Сообщений: 11
Репутация: 0

Сообщение # 2028 | 20:08:34
Как бы убрать мусор на скриншоте ниже, при этом, чтобы страницы
/search/skyrim/
/search/steam/
и тд остались в поиске?

red-fx
Сообщений: 4
Репутация: 0

Сообщение # 2029 | 16:59:32
Здравствуйте.
Подскажите, как можно запретить индексирование материалов в модуле, но не головную страницу модуля?
Модуль news.
Прописал в робот.тхт Disallow: /news/*
Но вместе с материалами не индексируется и сам http://сайт/news/
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Страница 136 из 136«12134135136
Поиск: