Чат сообщества
   | |
| Модератор форума: Yuri_G |
| Сообщество uCoz » Вебмастеру » Раскрутка сайта » Индексирование сайта запрещено в файле robots.txt (ошибки индексирования при снятом карантине) |
| Индексирование сайта запрещено в файле robots.txt |
 Проблема На сайте стандартный robots.txt карантин закончился, а в вебматере Яндекса есть запись "Ваш сайт не проиндексирован Яндексом.(Индексирование сайта запрещено в robots.txt? Если вы исправили robots.txt, необходимо заново добавить сайт в очередь на индексирование.)"  Причины 1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Яндекса проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками 2) Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Яндекса и смотрите информацию по старому 3) Ошибки в файле robots.txt, если составлен и залит некорректный по содержанию файл. Во избежании ошибок, если вы не разбираетесь в этом, пользуйтесь стандартным. Проблема Вебмастер Google - ошибки сканирования - заблокирован файлом robots.txt. На сайте карантин закончился Причины 1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Google проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками 2) Если сайт давно проиндексирован и вы получили инфо о запрете проиндексированных страницах. Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Google и смотрите информацию по старому 2) Если сайт снят с карантина давно и индексируется нормально, то смотрите список заблокированных страниц, которые выдает Google. Перейдите по ссылкам, которые указаны в списке как заблокированные. Это должны быть все страницы запрещенные в robots.txt и вебмастер выдает по ним техническую информацию. Реагировать на это не надо, даже если список большой Проблема Яндекс при обработке robots.txt выдает ошибку - "Обнаружена неизвестная директива" Причина 1) Была прописана несуществующая директива 2) Ошибки синтаксиса и запрещенные символы и теги |
|
Проблема На сайте стандартный robots.txt карантин закончился, а в вебматере Яндекса есть запись "Ваш сайт не проиндексирован Яндексом.(Индексирование сайта запрещено в robots.txt? Если вы исправили robots.txt, необходимо заново добавить сайт в очередь на индексирование.)" Причины 1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Яндекса проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками 2) Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Яндекса и смотрите информацию по старому 3) Ошибки в файле robots.txt, если составлен и залит некорректный по содержанию файл. Во избежании ошибок, если вы не разбираетесь в этом, пользуйтесь стандартным. Проблема Вебмастер Google - ошибки сканирования - заблокирован файлом robots.txt. На сайте карантин закончился Причины 1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Google проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками 2) Если сайт давно проиндексирован и вы получили инфо о запрете проиндексированных страницах. Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Google и смотрите информацию по старому 2) Если сайт снят с карантина давно и индексируется нормально, то смотрите список заблокированных страниц, которые выдает Google. Перейдите по ссылкам, которые указаны в списке как заблокированные. Это должны быть все страницы запрещенные в robots.txt и вебмастер выдает по ним техническую информацию. Реагировать на это не надо, даже если список большой Проблема Яндекс при обработке robots.txt выдает ошибку - "Обнаружена неизвестная директива" Причина 1) Была прописана несуществующая директива 2) Ошибки синтаксиса и запрещенные символы и теги |
|
Помогите, пожалуйста!
Что это озночает? Яндекс пишет: "Внимание! Главная страница сайта исключена из индекса: Документ запрещен в файле robots.txt ." До этого сайт нормально работал месяца 3. Сайт сам http://sidelnikoff.ucoz.ru/ |
|
Cайт запрещен к индексации пишит мне яндекс, а файле роботс вот это
User-agent: * Disallow: / что делать? нету опыта не буду менять его http://uc-life.ru шаблоны, скрипты для ucoz
|
|
sai6808, ваш робот по стандартному домену юкоза выглядит так
Quote User-agent: * Disallow: / к вашему сайту прикреплен домен sidelnikov.su прикреплен без возможности индексации по обоим доменам, но автоматическое перенаправление со стандартного на новый не стоит. при прикреплении домена без возможности индексации по обоим доменам старый домен закрывается от индексации роботом. так что у вас все правильно. ваша задача наблюдать в яндексе новый домен раз прикрепили, а не на старый смотреть |
|
farvtur, каким числом было сообщение от яндекса об блокировке главной в роботе. числа смотрите.
когда вы прикрепили домен? вы смотрите инфо по сайту с новым доменом или со старым юкозовским? при прикреплении домена при отсутсвии настроки индексации по двум доменам, старый юкозовский адрес идет в запрет по роботу, а новый уже идет на индексацию. так что сначала разберитесь для какого адреса вы смотрите инфо. если для юкозовского адреса, то у вас все правильно. ждите индексации по прикрепленному домену. в роботе можете прописать хост на новый домен |
|
Добрый день. Создал первый сайт на Юкоз, и постоянно возникают проблемы. Очередная проблема такая: карантин снят тк я оплатил премиум.
Начал добавлять в вебмастер Яндекс, подтвердил права с помощью метатега, но обнаружил такую фразу:"Внимание! Главная страница сайта исключена из индекса: Документ запрещен в файле robots.txt ." Вот файл robots.txt: Code User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /shop/order/ Sitemap: http://farvater-tur.ru/sitemap.xml Sitemap: http://farvater-tur.ru/sitemap-forum.xml Sitemap: http://farvater-tur.ru/sitemap-shop.xml ПОМОГИТЕ разобраться, плиз! Добавлено (19-Сен-2011, 15:19:00) --------------------------------------------- Я в ШОКЕ!!! Многие пишут, что проблема не в robots.txt . Люди!!! Какие ещё могут быть варианты? Добавлено (19-Сен-2011, 18:26:27) --------------------------------------------- Кстати, я поставил свое меню, а стандартное удалил Сообщение отредактировал Zard - Понедельник, 23 Июл 2012, 11:09:52
|
|
site-Master,
Quote что делать? нету опыта не буду менять его |
|
Tan4ik,
Quote кто может сказать что это? теперь с вашего сайта карантин снят и вам надо ждать индексации, на которую тоже нужно время |
|
Miss_Esq,
Quote Disallow: /search/ malroz, робот правильный, а то что пишет гугл - это информация, на которую вам не стоит обращать внимание. это результаты поиска. вида http://malroz.ru/search/%D0%A7%D0%B5%D0%BB%D0%B8%D1%82%D0%B0/ их не должно быть в индексе. остальное технические страницы. ничего не трогайте и ничего не предпринимайте |
|
malroz,
Quote как исправить? Disallow: /search/ |
|
Яндекс выплевывает главную страницу из за роботекста,
 В чем у меня проблема, подскажите как ее исправить и что занчит вот это?:  Прикрепления:
2770872.jpg
(97.6 Kb)
·
9816314.jpg
(90.2 Kb)
Сообщение отредактировал Alexale - Пятница, 23 Сен 2011, 15:13:55
|
| |||