Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
Amati5210
Сообщений: 125
Репутация: 16

Сообщение # 601 | 21:09:16
Quote (Владимир_Лунев)
Нормальный ли у меня Robots.txt ???

Нормальный. А что именно беспокоит?

Мой сайт РемДомТех
Владимир_Лунев
Сообщений: 48
Репутация: 22

Сообщение # 602 | 21:24:59
Quote (Amati5210)
Нормальный. А что именно беспокоит?

Часто выбрасывает все про индексированные страницы из поисковиков

Tofik5592
Репутация: 0

Сообщение # 603 | 22:44:35
Сайт не проиндексирован из-за запрета в robots.txt

Проверка выявила полный запрет на индексирование сайта в вашем файле robots.txt, поэтому сайт не будет обходиться роботом Яндекса. Пожалуйста, воспользуйтесь формой проверки. Если сейчас запрет отсутствует, то сайт начнет индексироваться в течение 2 недель, после чего сообщение обновится. Если запрет все еще присутствует, то по вопросу устранения этой проблемы Вам нужно обратиться к администратору вашего сайта или хостеру.
что мне делать пробую все не в какую))
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 604 | 22:58:51

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Tofik5592
Репутация: 0

Сообщение # 605 | 23:16:09
а по шаговой можно пожалуйста :)
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 606 | 23:31:24
Tofik5592, что вам пошагово? сайт на карантине первые 30 дней после создания. сайт на карантине не нужно добавлять в поисковые системы на индексации. если добавили сайт на карантине, то получаете ошибки. даже после снятия карантина ошибки будут появляться ещё какое-то время
где адрес проблемного сайта?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
serg145
Сообщений: 3
Репутация: 0

Сообщение # 607 | 13:34:26
Сегодня моему сайту 31 день
Робот показывает вот это
Вопрос: снят ли у меня запрет на на индексацию?
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: http://sharing-sergsat.ucoz.ru/sitemap.xml
Sitemap: http://sharing-sergsat.ucoz.ru/sitemap-forum.xml
Sitemap: http://sharing-sergsat.ucoz.ru/sitemap-shop.xml
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 608 | 14:01:15
serg145, снят запрет. и в этой теме про это написано

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
xado1203
Сообщений: 59
Репутация: 6

Сообщение # 609 | 15:27:37
Здравствуйте, сайту больше 6 месяцев www.kodi.at.ua
Google выдает результаты индексации:
Проиндексировано всего 1 877
Не выбрано 380
Заблокировано в файле robots.txt 1 718

Почему страницы заблокированы? На сайте ничего не менял, все настройки стандартные.

Яндекс, насколько я понял, сайт вообще на сканировал.
И еще, страницы с товарами в интернет-магазине сканируются или нет?
Спасибо
seadog
Репутация: 0

Сообщение # 610 | 12:04:07
Собственно, о проблемке еще вчера сообщил в службу поддержки:
Quote
Не снимается "карантин" с сайта www.taksi-na-rublevke.ru/ Bonus в ожидании

Для того, чтобы использовать сервис AdWords в Google, хотелось бы снять "карантин".
Для этого оплатил премиум-аккаунт, надеясь, как было и обещано, на НЕМЕДЛЕННОЕ разблокирование сайта и изменение файла robots.txt
Прошло уже около часа, поисковик Google все так же печально сообщает: "www.taksi-na-rublevke.ru/
Описание веб-страницы недоступно из-за ограничений в файле robots.txt."
Прошу изменить файл robots.txt, чтобы можно было "двигаться" дальше... .
Поступил: 31.10.2012, 17:13


Прошло уже почти сутки, ответа нет как нет.... :(
Да и Google не изменил своего отношения к сайту.

Я уж, честно говоря, волноваться начал - не случилось ли чего с сотрудниками службы поддержки ??? [color=red][/color] :o
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 611 | 14:53:03
xado1203, вот ваш роботс http://kodi.at.ua/robots.txt он правильный
гугл сообщает о тех ТЕХНИЧЕСКИХ страницах, которые закрыты роботсом. гугл собирает все адреса с сайта, поэтому в вебмастере отмечает список заблокированных.

и что значит яндекс не сканировал сайт? это что в выдаче с красивым описанием? он даже ваши данные вывел

Прикрепления: 4207645.jpg (31.3 Kb)

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 612 | 14:54:57
seadog, карантин снят. вот ваш роботс http://www.taksi-na-rublevke.ru/robots.txt

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
xado1203
Сообщений: 59
Репутация: 6

Сообщение # 613 | 21:00:05
webanet, спасибо
Admin1969
Сообщений: 10
Репутация: -5

Сообщение # 614 | 22:10:48
Как удалить сайт со ВСЕХ ПОИСКОВЫХ СИСТЕМ ???
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 615 | 22:16:13
Admin1969, запретите индексирование с помощью файла роботтекст
нужно прописать так

User-agent: *
Disallow: /

дальше в вебмастерах удалите сайт

в вебматере гугла можно через параметры урл выставить адрес сайта. через пару дней из индекса начнут исчезать ссылки

пользователи на сайте предполагаются или нет? если нет, то закройте сайт на тех.работы и все. но в роботс все равно пропишите запрет

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Поиск:
Telegram
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!