Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Индексирование сайта запрещено в файле robots.txt (ошибки индексирования при снятом карантине)
Индексирование сайта запрещено в файле robots.txt
Модератор форума
Сообщение # 1 | 17:33:08
Проблема
На сайте стандартный robots.txt карантин закончился, а в вебматере Яндекса есть запись "Ваш сайт не проиндексирован Яндексом.(Индексирование сайта запрещено в robots.txt? Если вы исправили robots.txt, необходимо заново добавить сайт в очередь на индексирование.)"

Причины
1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Яндекса проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками
2) Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Яндекса и смотрите информацию по старому
3) Ошибки в файле robots.txt, если составлен и залит некорректный по содержанию файл. Во избежании ошибок, если вы не разбираетесь в этом, пользуйтесь стандартным.

Проблема
Вебмастер Google - ошибки сканирования - заблокирован файлом robots.txt. На сайте карантин закончился

Причины
1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Google проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками
2) Если сайт давно проиндексирован и вы получили инфо о запрете проиндексированных страницах.
Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Google и смотрите информацию по старому
2) Если сайт снят с карантина давно и индексируется нормально, то смотрите список заблокированных страниц, которые выдает Google. Перейдите по ссылкам, которые указаны в списке как заблокированные. Это должны быть все страницы запрещенные в robots.txt и вебмастер выдает по ним техническую информацию. Реагировать на это не надо, даже если список большой

Проблема
Яндекс при обработке robots.txt выдает ошибку - "Обнаружена неизвестная директива"

Причина
1) Была прописана несуществующая директива
2) Ошибки синтаксиса и запрещенные символы и теги
Клюева
Репутация: 0

Сообщение # 361 | 14:19:50
Указанный URL запрещен к индексации в файле robots.txt на сайте privatagentmar.ucoz.ru.
Подскажите что мне делать дальше?
Деееенчик
Сообщений: 190
Репутация: 116

Сообщение # 362 | 14:29:59
Клюева, Ваш сайт на карантине,он длится 30 дней.

Благодарности в репутацию и в награды!
P.S Плюс под аватаркой)
Клюева
Репутация: 0

Сообщение # 363 | 14:35:37
а если пополню на 2 $.снимится карантин?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 364 | 19:49:45
Клюева, Если больше 2 $ USA .... то снимется ...

MasyerVanyaPro
Сообщений: 76
Репутация: 3

Сообщение # 365 | 09:43:17
Здрасте.Вот моему сайту уже 35 жней,карантин снят.Но я зделал ошибку, зарегистрировал его рано и теперь "ошибки".В этой теме прочитал что нужно удалить с Веб-Мастеров сайт и зарегистрировать снова.Я удалил с яндекса и с гугла,на следуйший день создал новый аккаунт,но выскакивают снова ошибки(запрет в роботс.txt),помогите пожалуйсто
$VITALIK$
Сообщений: 299
Репутация: 79

Сообщение # 366 | 10:07:49
MasyerVanyaPro, Адрес сайта дайте.

Россия Чемпион !!!
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 367 | 10:29:56
MasyerVanyaPro, robots.txt у вас системно нормальный, подробности ....

MasyerVanyaPro
Сообщений: 76
Репутация: 3

Сообщение # 368 | 13:00:38
Miss_Esq, Ну,это хорошо.Но как мне быть дальше?Снова регистрироваться?

Добавлено (25 Авг 2013, 13:00:38)
---------------------------------------------
Сайт

Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 369 | 13:10:37
MasyerVanyaPro, Попробуйте зарегистрироваться снова, ...

$VITALIK$
Сообщений: 299
Репутация: 79

Сообщение # 370 | 14:43:47
MasyerVanyaPro, Тоже самое. Ошибка robots.txt

Цитата
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search/
Disallow: /shop/order/
Disallow: /?ssid=

Host: cinemahd-720.ucoz.com
Sitemap: http://cinemahd-720.ucoz.com/sitemap.xml
Sitemap: http://cinemahd-720.ucoz.com/sitemap-forum.xml
Sitemap: http://cinemahd-720.ucoz.com/sitemap-shop.xml


Красное добавить.

Добавлено (25 Авг 2013, 14:43:47)
---------------------------------------------

Цитата ($VITALIK$)
MasyerVanyaPro, Тоже самое. Ошибка robots.txt

Блин , удалите пост пожайлуста. Я чот прогнал, что у него не свой свой домен. Ток щас заметил. Поспешил, извиняюсь

Россия Чемпион !!!
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 371 | 14:50:43
$VITALIK$, hands

MasyerVanyaPro
Сообщений: 76
Репутация: 3

Сообщение # 372 | 15:14:39
Еще вопросик,как удалить сайт с вебмастера,гугл например,не могу найти

Добавлено (25 Авг 2013, 15:14:39)
---------------------------------------------
Просто удалил его,регистрирую,но оно все ровно мне пишет запрет

$VITALIK$
Сообщений: 299
Репутация: 79

Сообщение # 373 | 15:25:13
Цитата (MasyerVanyaPro)
Просто удалил его,регистрирую,но оно все ровно мне пишет запрет

У вас вроде в яше всё хорошо, сайт проиндексирован. Где у вас ошибку выдаёт ? сделайте скрин.


Россия Чемпион !!!
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 374 | 15:29:33
MasyerVanyaPro, на главной веб мастера ..

Прикрепления: 0063393.png (14.2 Kb)

MasyerVanyaPro
Сообщений: 76
Репутация: 3

Сообщение # 375 | 15:33:58
Я так понял связано это с Картой сайта 

Вот что меня напрягает.Это нормально?
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Индексирование сайта запрещено в файле robots.txt (ошибки индексирования при снятом карантине)
Поиск: