Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 151 | 19:50:27
Dragon5798, Карантин - 30 дней со дня основания сайта. Пока карантин не будет снят ни о каком добавлении сайта в поисковики и ни о какой индексции речи быть не может ....

Dragon5798
Сообщений: 2
Репутация: 0

Сообщение # 152 | 22:22:15
Сайт просто существует уже больше месяца и первая новость датирована 10.10.2011.
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 153 | 22:24:48
Dragon5798, к сайту домен крепился?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Dragon5798
Сообщений: 2
Репутация: 0

Сообщение # 154 | 22:31:23
Да, но сейчас домен не используется. Если проблема в этом то что нужно сделать чтобы robots.txt стал доступным? Отключить домен?
Сообщение отредактировал Dragon5798 - Вторник, 10 Янв 2012, 22:34:47
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 155 | 22:38:04
Dragon5798, что значит домен не используется? просто при прикреплении домена старый адрес блокируется к индексации, а новый индексируется. у вас нормальный робот должен быть на новом домене. если поставлена галка на индексацию по обоим доменам, то индексируются оба.

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Dragon5798
Сообщений: 2
Репутация: 0

Сообщение # 156 | 22:48:42
Вот как, мы просто планировали перейти на более удобный для нас адрес и из-за этого не использовали уже существующий домен. Теперь стало ясно что robots.txt отсутствует из-за прикреплённого домена. Большое спасибо за помощь. Вы нам очень помогли.
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 157 | 13:20:36
vasia0412,
Quote
А что нужно написать, чтобы запретить индексирование?

То что упомянуто в Сообщение # 275 ???
Правильно ..
И так правильно
Disallow: /_ld/
и так
Disallow: /_ld/0
и так
Disallow: /_ld/0/
Но оставьте как у вас написано .. Disallow: /_ld

Quote
но вроде это ничего не дало.
Сразу и ни какого эффекта и не будет , пройдёт много времени пока это исчезнет ...
А может и вообще не исчезнуть , Google отличается редким пренебрежением к запретам на индексацию ..

Сообщение отредактировал Miss_Esq - Четверг, 12 Янв 2012, 13:28:08
Selena
Сообщений: 15657
Репутация: 1100

Сообщение # 158 | 18:20:48
vasia0412, если уже прописали запрет, то ждите теперь переиндексации поисковиком.

Отправляя сообщение о помощи, приводите ссылку на свой сайт. Это не считается рекламой, зато снимает массу вопросов.
Dragon5798
Сообщений: 2
Репутация: 0

Сообщение # 159 | 22:16:53
Здраствуйте.
Мы обнаружили что на нашем сайте http://mangani.3dn.ru файл robots.txt имеет вот такой вид:

User-agent: *
Disallow: /

Обнаружили мы это при попытке индексировать сайт в яндексе и google. Соответственно в файловом менеджере сайта он не отображается. И этот вид robots.txt похож на тот который должен быть при попадании сайта в карантин. Причин попадания в карантин мы не знаем и изменить robots.txt не можем. Уведомлений по этому поводу не замечали. Можете подсказать что нужно сделать чтобы получить к нему доступ и узнать попал ли сайт в карантин или это из-за других причин?
PS извините если вопрос был задан не в той теме.
amishik
Сообщений: 70
Репутация: 26

Сообщение # 160 | 04:46:47
Обратил внимание, что Яндекс не реагирует на поисковые запросы по темам на сайте. Обнаружил, что появилась такая запись:
www.aiamci.ucoz.ru Ваш сайт не был проиндексирован из-за запрета в файле robots.txt.4.11.2011 наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt, поэтому сайт в поиске не участвует. Пожалуйста, воспользуйтесь формой проверки. Если сейчас запрет отсутствует, то сайт начнет индексироваться в течение 2 недель, после чего сообщение обновится. Если запрет все еще присутствует, то по вопросу устранения этой проблемы Вам нужно обратиться к администратору Вашего сайта или хостеру.

Отсюда и соответствующие вопросы чайника -как это устранить?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 161 | 09:43:57
Dragon5798, amishik, Вы когда зарегистрировали сайт в Яндексе ?? Наверняка ДО окончания карантина , соответственно и такой результат . Удалите его из поисковика и зарегистрируйте в WEB мастере яндекса поновой ..

amishik
Сообщений: 70
Репутация: 26

Сообщение # 162 | 15:33:28
Miss_Esq, могу уверенно сказать, что это было после карантина, причем с запасом. Т.е прошло не менее месяца.
Причем сайт индексировался около 2х месяцев.
1 или 2 ноября присоединил домен aiamci.ru.
Сообщение отредактировал amishik - Понедельник, 16 Янв 2012, 15:38:22
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 163 | 15:42:27
amishik, После прикрепления домена и появились проблемы ??



У вас не прописана деректива HOST для домена , поисковики его и не учитывают поэтому .. то что синим цветом написано дописать ..

Сообщение отредактировал Miss_Esq - Понедельник, 16 Янв 2012, 15:59:06
amishik
Сообщений: 70
Репутация: 26

Сообщение # 164 | 15:55:10
Гугл и Майл Ру без всяких проблем.
Как прописать? Индексация по обеим доменам у меня более месяца включена.
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 165 | 15:57:55
amishik, Как прописать? Дописать в файле roots.txt

Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: