Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
sss4303
Сообщений: 3
Репутация: 0

Сообщение # 841 | 14:56:43
Здравствуйте. Посмотрите пожалуйста, сделал robot для своего сайта, но я удалил shop из робота если чего не так дополните пожалуйста.
Вот:
User-agent : *
Disallow: /a/
Disallow : /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=

Sitemap: http://www.astra-soft.ru/sitemap.xml
Sitemap: http://www.astra-soft.ru/sitemap-forum.xml

А вот сайт: http://www.astra-soft.ru
Tyzemec
Сообщений: 82
Репутация: 0

Сообщение # 842 | 15:53:53
Цитата (webanet)
Tyzemec, там идет редирект на главную. если на страницах сайта нет нигде ссылок на эти пустые страницы, то само отвалится

Лучше тогда редирект убрать? Ссылок на эти страницы на сайте вообще нигде нет
natalivesna
Сообщений: 56
Репутация: 2

Сообщение # 843 | 21:54:08
С помощью роботс.тхт от индексации можно закрыть ссылки или это не нужно делать
ADMINS0341
Репутация: 0

Сообщение # 844 | 13:46:56
Всем доброго времени суток! Проблема в следующем, оплатил снятие рекламы Ucoz с сайта на 3 месяца, но Яндекс так и выдает ошибку "Сайт не проиндексирован из-за запрета в robots.txt" мне нужно делать чтобы он про индексировался. заранее спасибо.
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 845 | 13:55:50
ADMINS0341, ждать нужно. вы добавили сайт, который находился на карантине. читаем //forum.ucoz.ru/forum/21-38581-1

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Tyzemec
Сообщений: 82
Репутация: 0

Сообщение # 846 | 15:22:45
Цитата (webanet)
Tyzemec, там идет редирект на главную. если на страницах сайта нет нигде ссылок на эти пустые страницы, то само отвалится

Убрать редирект?
Flashe
Репутация: 0

Сообщение # 847 | 00:15:39
У меня такая проблема - поисковики перестали индексировать сайт из-за изменения тематики основного раздела
после того как я сменил тематику Robots и Sitemap не обновились хотя я читал что они обновляются Юкозом раз в 2 дня а после смены тематики прошло уже около 2 недель. Не могли бы вы мне помочь с моей проблемой. Вот ссылка на мой сайт http://mysoft.ucoz.net/ зарание спасибо!
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 848 | 00:20:32
Flashe, робос не должен обновляться при смене тематики. а карту сайта вы можете удалить из файлового менеджера и она обновится

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 849 | 00:20:58
Tyzemec, как редирект там прописан? код дайте

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Flashe
Репутация: 0

Сообщение # 850 | 00:23:13
webanet, спасибо!
Tyzemec
Сообщений: 82
Репутация: 0

Сообщение # 851 | 10:30:53
Цитата (webanet)
Tyzemec, как редирект там прописан? код дайте
<meta http-equiv="refresh" content="1; /load/" />
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 852 | 13:50:53
Tyzemec, зачем вы полностью побрили страницы каталогов?

view-source:http://www.tyzemec.ru/load/7 в этом виде как есть лучше чтобы стоял редирект. но это не самое красивое решение
а робот пишет про отсутствие текста правильно. на странице с редиректом вообще все отсутствует
какой смысл был вот так стричь эти страницы?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Tyzemec
Сообщений: 82
Репутация: 0

Сообщение # 853 | 19:22:34
Цитата (webanet)
Tyzemec, зачем вы полностью побрили страницы каталогов?view-source:http://www.tyzemec.ru/load/7 в этом виде как есть лучше чтобы стоял редирект. но это не самое красивое решение
а робот пишет про отсутствие текста правильно. на странице с редиректом вообще все отсутствует
какой смысл был вот так стричь эти страницы?

А толк в том что там что то будет есть? Не сможете предложить случайно более "красивое" решение проблемы? Спасибо за участие в моём вопросе!)
Allegator
Сообщений: 2
Репутация: 0

Сообщение # 854 | 00:57:25
User-agent: *Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: akvatexstroy.org.ua

Sitemap: http://akvatexstroy.org.ua/sitemap-forum.xml
Sitemap: http://akvatexstroy.org.ua/sitemap.xml
User-agent: *Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: akvatexstroy.org.ua

Sitemap: http://akvatexstroy.org.ua/sitemap-forum.xml
Sitemap: http://akvatexstroy.org.ua/sitemap.xmlМожете пожалуйста проверить тут все правильно прописано?

Добавлено (13 Янв 2013, 00:57:25)
---------------------------------------------
User-agent: *Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: akvatexstroy.org.ua

Sitemap: http://akvatexstroy.org.ua/sitemap-forum.xml
Sitemap: http://akvatexstroy.org.ua/sitemap.xml

Можете пожалуйста проверить, правильно тут все?

elenwind
Сообщений: 4
Репутация: 0

Сообщение # 855 | 21:11:58
Сайт создали 18.09.2012, был зарегистрирован в поисковиках и каталогах, можно было найти через поисковик. Несколько страниц было проиндексировано. Перед новым годом (в конце декабря) неожиданно обнаружила запись на сайте, что сайт в карантине. Сегодня оплатила пакет на следующий месяц (5.5 у.е.). Что делать? Почему через 3 месяца вдруг карантин?
Поиск:
Telegram
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!