Чат сообщества
   | |
| Модератор форума: Yuri_G |
| Сообщество uCoz Вебмастеру Раскрутка сайта Robots.txt (индексация сайта) |
| Robots.txt |
|
Нажмите на ссылку, чтобы перейти к ответу
Сообщение отредактировал webanet - Вторник, 27 Мар 2018, 20:08:42
|
|
webanet
А так не получиться, если прост закрыть конкретную стр. (как гостевую или обратную связь) /index/0-3 /gb Я сделал в архиве 50! Переключателей нет (главное чтобы глюка не было) :))) Вообще у меня ссылок на архив нет, все ссылки только на нужные стр.! Мешает теперь только (/news) архив!!! Quote (webanet) если вы не хотите индексации новостей на сайте и хотите оставить только главную, то тоже можете прописать <link rel="canonical" href="адрес главной"/> в шаблон архива материалов. но тогда новости добавленные в модуль новости и ваши категории не будут индексироваться и выпадут из индекса. Категории нужны!!!!!!!! |
|
Уважаемые друзья. Из инструментов ГУГЛ Вебмастер получил такую запись -
Доступ запрещен URL http://obkon.ucoz.com/index/sub/ 1. Скажите Что означает эта запись? 2. Что такое /index/sub/ 3. Что делать? У меня, действительно, с конца марта месяца перестал, вдруг, индексироваться сайт. |
|
Раша,
Quote (Раша) Что доступ в директорию запрещён в роботс. Quote (Раша) 2. Что такое /index/sub/ Служебная директория. Quote (Раша) 3. Что делать? По поводу? Ничего не делать, так и должно быть, это служебная директория и роботам в ней нечего делать. ... Quote (Раша) У меня, действительно, с конца марта месяца перестал, вдруг, индексироваться сайт. Как вы это определили? Адрес сайта. ... Всё написанное выше - моё личное мнение и на абсолютную правоту не претендует.
Есть вопросы лично ко мне - пиши сюда: http://likbezz.ru/forum/8 Сообщение отредактировал fflesh - Среда, 11 Апр 2012, 10:09:38
|
|
fflesh ! Даю адрес сайта http://obkon.ucoz.com/
Вот дополнительная информация: Добрый день! 1. У меня пропал из индексации сайт http://obkon.ucoz.com/ Некоторые говорят, что провайдер его заблокировал. Если это так, то прошу Вас посодействовать в разблокировании и доступе к индексации роботу Googlebot. Вот письмо по этому поводу в Вебмастере ГУГЛ - "Роботу Googlebot не удалось просканировать URL, поскольку для доступа к странице требуется аутентификация на сервере или доступ к сайту для робота Googlebot блокируется сервером". 2. Вот ещё письмо: Доступ запрещен URL: http://obkon.ucoz.com/index/sub/ Сведения об ошибке В файле Sitemap Ссылающиеся домены Дата последнего сканирования: 29.03.12 Роботу Googlebot не удалось просканировать URL, поскольку для доступа к странице требуется аутентификация на сервере или доступ к сайту для робота Googlebot блокируется сервером. Подробнее... В корне сайта стоит стандартный файл Роботса. Помогите - что делать. Владимир. |
|
Раша, ваш сайт присутствует в выдаче
яндекс http://yandex.ru/yandsearch?text=host:obkon.ucoz.com&lr=213 гугл http://www.google.ru/search?....e=UTF-8 страница http://obkon.ucoz.com/index/sub/ индексироваться не должна. информация о невозможности её проиндексировать является технической информацией |
|
Tyzemec, ещё точнее можно сказать будет при осмотре сайта. если вы сами залили файл с названием robot.txt, то он не заменил системный и системный работал параллельно в прежнем режиме. если вы предлагали файл с неверным именем роботам в вебмастерах, то должны были получать ошибку по предлагаемому файлу, в тоже время поисковые системы брали стандартный роботс
|
|
Quote (webanet) Tyzemec, ещё точнее можно сказать будет при осмотре сайта. если вы сами залили файл с названием robot.txt, то он не заменил системный и системный работал параллельно в прежнем режиме. если вы предлагали файл с неверным именем роботам в вебмастерах, то должны были получать ошибку по предлагаемому файлу, в тоже время поисковые системы брали стандартный роботс Т.е. по всей логике сайт под фильтром просто, поэтому он не индексируется? До покупки доменного имени всё было нормально, ucoz.com индексировался, потом все страницы выпали из индекса и больше не попадали. А сегодня нашел эту кляузу с роотс.тхт, обрадовался, подумал изза него. А Вы меня опять огорчили(((((( |
| |||
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!