Страница 1 из 6123456»
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Google Вебмастер » Ограничения в файле robot.txt в Google (сайт с карантина снят, а какие-то ограничения нашлись...)
Ограничения в файле robot.txt в Google
stroilel
Сообщений: 3
Репутация: 12

Сообщение # 1 | 21:27:56
При введении в поисковую строку Google адреса юкозовской странички сайт появляется в поисковике на первой позиции, но под этим появляется вот такая надпись: "Описание веб-страницы недоступно из-за ограничений в файле robots.txt." Что это обозначает? Сайт с карантина снят, файл robot.txt - с ним все хорошо. Внесла в поисковик только сегодня, мета-тег на главную страницу вставила.
webanet
Личный менеджер
Сообщений: 23048
Репутация: 4867

Сообщение # 2 | 21:52:36
stroilel, нельзя добавлять сайты, которые находятся на карантине в поисковые системы. читайте раз http://forum.ucoz.ru/forum/21-38597-1 читайте два http://forum.ucoz.ru/forum/21-38581-1

как закончится карантин нужно добавить сайт через аддурилку снова. и ждите переиндексации

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
stroilel
Сообщений: 3
Репутация: 12

Сообщение # 3 | 22:06:58
Quote (webanet)
нельзя добавлять сайты, которые находятся на карантине


мой сайт НЕ находится на карантине. В поиск до истечения карантина я его не включала. Он существует больше месяца, в поиск Google я его внесла только сегодня, и файл robot.txt выглядит вот как:
- - - - -
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: http://мой сайт/sitemap.xml
Sitemap: http://мой сайт/sitemap-forum.xml
Sitemap: http://мой сайт/sitemap-shop.xml
- - - - -

Поэтому не могу понять, что обозначает эта надпись в Google:"Описание веб-страницы недоступно из-за ограничений в файле robots.txt."
Про какие тогда ограничения идет речь?
webanet
Личный менеджер
Сообщений: 23048
Репутация: 4867

Сообщение # 4 | 22:09:16
stroilel, тогда дайте большой, хорошо просматриваемый скрин ошибок гугла, чтобы можно было увидеть адрес страницы, которая запрещена. и дайте адрес сайта

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
stroilel
Сообщений: 3
Репутация: 12

Сообщение # 5 | 22:14:44
Quote (webanet)
тогда дайте большой, хорошо просматриваемый скрин ошибок гугла, чтобы можно было увидеть адрес страницы, которая запрещена.


Введите пожалуйста в поисковик google.ru адрес сайта, вводите без www.
Выйдет в результатах поиска на первой позиции сайт, и увидите в описании "Описание веб-страницы недоступно из-за ограничений в файле robots.txt."

Скрин ошибок гугла - это я к сожалению не знаю как сделать...

Заранее спасибо за участие.
Сообщение отредактировал stroilel - Воскресенье, 14 Окт 2012, 05:06:52
webanet
Личный менеджер
Сообщений: 23048
Репутация: 4867

Сообщение # 6 | 22:27:00
stroilel, значит это то, что я сказала. добавили как вы сказали в поиск только сегодня, но даже гугл не страдает такой оперативностью. значит сайт был добавлен, когда был на карантине. иди в аддурилку и добавьте снова http://www.google.ru/intl/ru/addurl.html
вы точно поспешили. теперь ждите
вебмастер гугла есть?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
stroilel
Сообщений: 3
Репутация: 12

Сообщение # 7 | 22:34:47
Сайт существует с августа, как же так получается, что 13 октября он все еще на карантине?!

В вебмастере гугла сайт отображается, я внесла мета-тег который Google сгенерировал, на данный момент в вебмастере о моем сайте пишет вот что: Новые сообщения и уведомления о критических ошибках отсутствуют.

Делаю все механически, особо в этом не разбираюсь.

Мне нужно удалить сайт через вебмастер?

А потом повторно его зарегистрировать здесь? http://www.google.ru/intl/ru/addurl.html ?
webanet
Личный менеджер
Сообщений: 23048
Репутация: 4867

Сообщение # 8 | 22:48:03
stroilel, а в вебмастере сайт давно? домен не прикрепляли?
в общем сюда внесите http://www.google.ru/intl/ru/addurl.html
и карту сайта добавьте в вебмастер вручную. нужно ввести только это sitemap.xml и ждите переиндексацию

Quote
что 13 октября он все еще на карантине
сейчас нет

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
stroilel
Сообщений: 3
Репутация: 12

Сообщение # 9 | 23:52:01
Quote (webanet)
а в вебмастере сайт давно?


Все действия с внесением в поисковик проводила исключительно сегодня. В вебмастер внесла сегодня.

Поэтому обидно, не понимаю в чем причина, сайт не вносился в поисковик в период карантина. Не понимаю сути, что я сделала не так. Ну как бы там не было, я так понимаю "лечение" такое:

Quote (webanet)


Удалять сайт в вебмастере не нужно? Просто продублировать add URL?

Quote (webanet)
карту сайта добавьте в вебмастер вручную. нужно ввести только это sitemap.xml


нашла файл sitemap.xml по адресу www.мойсайт.com/sitemap.xml. Сделала его проверку в Google.
Вот что написали!

Доступ к URL заблокирован в файле robots.txt.
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.


Почему же заблокирован?

Добавлено (13-Окт-2012, 23:52:01)
---------------------------------------------

Quote (stroilel)
домен не прикрепляли?


не знаю как это делается. Значит не прикрепляла.
Сообщение отредактировал stroilel - Суббота, 13 Окт 2012, 23:46:20
webanet
Личный менеджер
Сообщений: 23048
Репутация: 4867

Сообщение # 10 | 23:59:08
stroilel, ждите пока гугл не перепроверит роботс. он должен сделать 2 обхода

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
stroilel
Сообщений: 3
Репутация: 12

Сообщение # 11 | 00:18:20
Что сделала:

повторно внесла URL сюда:
http://www.google.ru/intl/ru/addurl.html
Удалось послать файл sitemaps.xml

пока файл robot.txt все еще присутствует в списке заблокированных url. (Рубрика Инструменты для URL).

Интересно, как быстро его разблокируют, есть какие-то сроки?
webanet
Личный менеджер
Сообщений: 23048
Репутация: 4867

Сообщение # 12 | 00:26:13
stroilel, больше ничего не нужно делать. ждите. смотря когда последний раз проверялся сайт. двое суток ждите. потом отпишетесь. нашли в вебмастере пункт с роботсом? там гугл пишет когда последний раз смотрел его. посмотрите число, когда он его брал и следите за изменениями. он должен два раза как минимум проверить роботс. потом все будет нормально

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
stroilel
Сообщений: 3
Репутация: 12

Сообщение # 13 | 01:35:40
Конкретную дату нашла только одну в вебмастере:

"Вот как поисковый робот Googlebot просканировал вашу страницу.
Дата: суббота, 13 октября 2012 г"


на страничке Заблокированные URL сведения о доступе к файлу robot.txt предоставлены вот в таком виде:
Google tried to crawl these URLs in the last 90 days, but was blocked by robots.txt.

Что же, будем ждать двое суток :)
Ладно, хоть не 15 :)

webanet, Спасибо за участие, как будут какие-то изменения отпишусь сюда, может еще кому-то тема пригодится.
webanet
Личный менеджер
Сообщений: 23048
Репутация: 4867

Сообщение # 14 | 02:10:13
stroilel,
Quote
Google tried to crawl these URLs in the last 90 days, but was blocked by robots.txt
плохо. гугл пишет, что ломился к вам не один раз. то есть более месяца. не переживайте, если придется ждать чуть больше

сделаем с вами китайскую хитрость. зайдите в вебмастер - состояние - посмотреть как гугль бот - там будет адрес вашего сайта. просто нажмите получить содержание. далее там же введите в форму адрес
video/vip/1/myvideo/prekladyobchod именно так как я дала и нажмите получить содержание.
так вы прямо на сайт направите робота. и так дела пойдут веселее.

в общем смотрите состояние - смотреть как гугль бот. если это у вас работает, то отлично. делайте как я сказала.

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
stroilel
Сообщений: 3
Репутация: 12

Сообщение # 15 | 02:46:25
Quote (webanet)
плохо. гугл пишет, что ломился к вам не один раз. то есть более месяца. не переживайте, если придется ждать чуть больше


Гугл ломился ко мне? Странно, конечно, но я польщена B)

Quote (webanet)
введите в форму адрес и нажмите получить содержание.


китайскую хитрость осуществила. "Статус получения- успешно". Нажать появившуюся кнопочку "Отправить в индекс"?

Quote (webanet)
делайте как я сказала


Есть, капитан! :)
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Google Вебмастер » Ограничения в файле robot.txt в Google (сайт с карантина снят, а какие-то ограничения нашлись...)
Страница 1 из 6123456»
Поиск: