Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1501 | 02:21:42
Klerka73,
Цитата
несколько раз удалял....
Спешка нужна в двух случаях:
1. при ловле блох и
2. при диорее ...

Удалить, зачистить КЭШ обозревателя, удалить временные файлы интернета, выключить компьютер. Поужинать час - два, включить компьютер и зарегистрировать сайт в web мастере Яндекса с использованием ДРУГОГО обозревателя и оставить сайт в покое ...
Завтра проверить состояние сайта в web мастере ...

Сообщение отредактировал Miss_Esq - Среда, 15 Янв 2014, 09:39:16
Klerka73
Репутация: 0

Сообщение # 1502 | 02:24:40
Miss_Esq, ладно утро вечера мудренее....
win2446
Репутация: 0

Сообщение # 1503 | 02:16:48
тоже возникла неожиданная проблема с файлом robots.txt.
сайт работает уже больше года, все карантины давно сняты, но вот пришло сообщение, что

"16.01.2014 наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt. "
и как теперь убрать этот запрет? сам файл системный (от юкоза), ничего не менялось и не загружалось.
и где он вообще находится, чтобы исправить это недоразумение?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1504 | 02:31:20
win2446,
Цитата
где он вообще находится, чтобы исправить это недоразумение
Будет там куда его загрузите... в Файловом менеджере в корне ...

win2446
Репутация: 0

Сообщение # 1505 | 02:41:12
Miss_Esq, спасибо
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1506 | 02:47:14
win2446,
Цитата
работает уже больше года, все карантины давно сняты
напишите о проблеме в техподдержку ..

mig29
Репутация: 0

Сообщение # 1507 | 09:05:00
Здравствуйте у меня такой вопрос, при подаче моего сайта в поисковик яндекс мне выдает такую информацию!

15.01.2014 наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt.
Пожалуйста, воспользуйтесь формой проверки. Если запрет все еще присутствует, то по вопросу устранения этой проблемы Вам нужно обратиться к администратору Вашего сайта или хостеру.Если сейчас запрет отсутствует, то сообщение обновится в течение 2–3 дней.

Что делать сайт не на карантине 16.1.14 была куплена услуга на 3$!
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1508 | 09:15:37
mig29, адрес у сайта есть ???

mik-user
Сообщений: 1
Репутация: 0

Сообщение # 1509 | 11:22:23
Цитата agroraiders ()
При хорошей посещаемости карантин продлится до двух недель. У малопосещаемых сайтов карантин 30 дней.
Цитата agroraiders ()
При хорошей посещаемости карантин продлится до двух недель.
Как должна быть посещаемость ?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1510 | 11:38:08
mik-user, Карантин - 30 +1 дней ...

Сообщение отредактировал Miss_Esq - Пятница, 17 Янв 2014, 11:38:45
mig29
Репутация: 0

Сообщение # 1511 | 22:57:04
http://rem-com.ucoz.ru/

Добавлено (17 Янв 2014, 22:57:04)
---------------------------------------------
Вот что еще он мне пишет, только сейчас заметил.

Ошибки на стороне вашего сервера или сайтаЧасто индексирование страниц намеренно запрещается вебмастером – это не является ошибкой и исправления не требует. При наличии страниц исключённых из-за ошибок на стороне сайта информация о них показывается на графике ниже. Точки на графике соответствуют обновлениям поисковой базы. Фрагмент графика можно увеличить, выделив его мышью.

Slim7913
Репутация: 0

Сообщение # 1512 | 12:15:23
Пдскажите, у сайта индексируется только главная страница, robots.txt стандартный, бана вроде нет, в чем может быть причина?

Вот сайт
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1513 | 12:44:30
Slim7913, Ну вообще то поисковики не обязаны что либо индексировать, маловато страниц для каких либо выводов, мал сайт по возрасту, было бы страниц 50 - 100 другой вопрос, да и тема игр закатана как асфальт, трудно пробить поисковики на интерес в этой теме ...

Slim7913
Репутация: 0

Сообщение # 1514 | 12:52:41
Странно, просто с технической точки зрения, если главная страница проиндексирована а остальные нет то причина либо в недоступности страниц(проверял, вроде всё ок), либо страници забанены (думаю был бы забанен весь сайт целиком).
Anglerdima
Сообщений: 133
Репутация: 13

Сообщение # 1515 | 13:46:58
Хлопцы, если главная в индексе, то ждите недельку-две, наполняйте сайт, и глазом моргнуть не успеете, как всё боты схавают. ))


А я хотел бы еще уточнить по поводу моих сообщений №1463 и №1492...

Напомню, нужно запретить индексировать фильтры.
Цитата Anglerdima ()
А Если прописать каноникал в шаблоне страницы со списком материалов раздела и категории таким образом^
<link rel="canonical" href="$SECTION_URL$">
<link rel="canonical" href="$CAT_URL$">
...соответственно

так не пойдёт(?), чтобы ищбавится от этих дублей, которые создает фильтр.


Цитата webanet ()
Anglerdima, пойдет. но полностью запретит индексацию страниц пагинации каталогов. если это не нужно, то очень даже пойдет


То есть, индексироваться будут только первая из страниц со списком материалов раздела и категории? Так ведь? И, в принципе, зачем в индексе страници пагинации, их многие специально закрывают от роботов... (?) И при таком подходе также скроются страницы-дубли сортировки материалов. хм...

Но при этом сами страници материала и комментариев будут индексироваться, так?

Тогда, думаю, решение нормальное (выше)?
Сообщение отредактировал Anglerdima - Суббота, 18 Янв 2014, 13:50:09
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: