Модератор форума: Yuri_G |
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Индексирование сайта запрещено в файле robots.txt (ошибки индексирования при снятом карантине) |
Индексирование сайта запрещено в файле robots.txt |
Проблема На сайте стандартный robots.txt карантин закончился, а в вебматере Яндекса есть запись "Ваш сайт не проиндексирован Яндексом.(Индексирование сайта запрещено в robots.txt? Если вы исправили robots.txt, необходимо заново добавить сайт в очередь на индексирование.)" Причины 1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Яндекса проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками 2) Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Яндекса и смотрите информацию по старому 3) Ошибки в файле robots.txt, если составлен и залит некорректный по содержанию файл. Во избежании ошибок, если вы не разбираетесь в этом, пользуйтесь стандартным. Проблема Вебмастер Google - ошибки сканирования - заблокирован файлом robots.txt. На сайте карантин закончился Причины 1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Google проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками 2) Если сайт давно проиндексирован и вы получили инфо о запрете проиндексированных страницах. Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Google и смотрите информацию по старому 2) Если сайт снят с карантина давно и индексируется нормально, то смотрите список заблокированных страниц, которые выдает Google. Перейдите по ссылкам, которые указаны в списке как заблокированные. Это должны быть все страницы запрещенные в robots.txt и вебмастер выдает по ним техническую информацию. Реагировать на это не надо, даже если список большой Проблема Яндекс при обработке robots.txt выдает ошибку - "Обнаружена неизвестная директива" Причина 1) Была прописана несуществующая директива 2) Ошибки синтаксиса и запрещенные символы и теги |
MasyerVanyaPro, Вы не правильно наверное добавляете файлы sitemap.xml.
Добавлено (25 Авг 2013, 15:44:11) Цитата ($VITALIK$) Вы не правильно наверное добавляете файлы sitemap.xml. Россия Чемпион !!!
|
$VITALIK$,
Цитата Вы не правильно наверное добавляете файлы sitemap.xml. Файл формируется автоматически ... есть сомнения , можно удалить из ФМ и и забив его в поиск получить актуальную версию .. Сообщение отредактировал Miss_Esq - Воскресенье, 25 Авг 2013, 15:46:41
|
$VITALIK$, Эмм..,Тогда как?Я просто добавил ссылку на sitemap.xml.и все.
|
Цитата (Miss_Esq) Файл формируется автоматически ... есть сомнения , можно удалить из ФМ и и забив его в поиск получить актуальную версию .. ну да , это понятно. просто я помню по своим сайтам. Мучался с добавлением в Гугле. Он постоянно шибку выдавал. Там адрес файла вроде не полный пишеться. Или даже помоему просто sitemap.xml без всякого адреса. Вот не помню просто. Добавлено (25 Авг 2013, 15:52:02) Россия Чемпион !!!
|
Miss_Esq, Не могли бы вы подробно описать:Что делать?
Добавлено (25 Авг 2013, 16:23:00) --------------------------------------------- Залил его в ФМ...Потом вбил его в поисковик...Потом проверил гуглом,Нечего не изменилось.. Сообщение отредактировал MasyerVanyaPro - Воскресенье, 25 Авг 2013, 16:24:47
|
Цитата (MasyerVanyaPro) Залил его в ФМ...Потом вбил его в поисковик...Потом проверил гуглом,Нечего не изменилось.. не надо не чо заливать. Просто удалите все файлы sitemap.xml из файлового менеджера. Они у вас после удаления обнлвяться автоматически Россия Чемпион !!!
|
Я ошибся,удалил его с ФМ,после этого нечего не изменилось
|
Цитата ($VITALIK$) не надо не чо заливать. Просто удалите все файлы sitemap.xml из файлового менеджера. Они у вас после удаления обнлвяться автоматически Нажмите на поиск по сайту ( в левой колонке ) И адреса файлов прогоните в браузерной строке для скорейшего обновления Код [url=http://fotozavr.ru/image/668.html]Смотрите скрин[/url] Добавлено (25 Авг 2013, 16:33:13) Цитата ($VITALIK$) Скрин Добавлено (25 Авг 2013, 16:34:57) Цитата (MasyerVanyaPro) Я ошибся,удалил его с ФМ,после этого нечего не изменилось Значит всё таки Этот вариант Россия Чемпион !!!
|
Изменилось только количество проблем,стало меньше,36
|
$VITALIK$, Ошибок не найдено
|
Еще вопрос почему проиндексировалась только главная страница?
|
Цитата (MasyerVanyaPro) Еще вопрос почему проиндексировалась только главная страница? У вас сайт будет прохлопываться примерно 2-3 месяца, тоесть не спеша, с чувством, с толком, с расстановкой, страница за страницей. Добавлено (25 Авг 2013, 17:06:50) Цитата ($VITALIK$) У вас сайт будет прохлопываться примерно 2-3 месяца, тоесть не спеша, с чувством, с толком, с расстановкой, страница за страницей. sitemap.xmlожно через твитер впринципе прохлопать. Добавляйте в аккаунт твитера ссылки на страницы которые хотите быстрее добавить в поиск. Россия Чемпион !!!
|
Спасибо
|
| |||