Чат сообщества
   | |
| Модератор форума: Yuri_G |
| Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта) |
| Robots.txt |
|
Нажмите на ссылку, чтобы перейти к ответу
Сообщение отредактировал webanet - Вторник, 27 Мар 2018, 20:08:42
|
|
Здраствуйте, помогите пожалуйста с сайтом.
Вебмастер Гугл выдает замечание - http://emb.my1.ru/index/3 URL restricted by robots.txt 2014-04-18. Сайт индексируется но ошибка меня смущает Пока сайт был в карантине ничего не делала (по моему). Страницу Обратная связь подкорректировала (там была лишняя информация), ничего не изменилось. Может подождать надо. И еще была бы очень благодарна выслушать отзывы о сайте, рекомендации по доработке. Может я что-то не так сделала. Большое спасибо Добавлено (28 Май 2014, 14:36:32) |
|
Ди6637, данная ошибка ничего опасного с себя не представляет для сайта, Гугль просто вам сообщает, что страница /index/3 запрещена к индексации вот и все и не стоит брать в голову, что там что-то не так как нужно.
Добавлено (28 Май 2014, 17:49:07) Цитата Ди6637 (  )И еще была бы очень благодарна выслушать отзывы о сайте, рекомендации по доработке. Может я что-то не так сделала. |
|
Вечер добрый!
Перерыла форумы - но все таки остались вопросы: Я создала сайт test.ucoz.ru И сразу же прикрепила основной test.ru соответственно 2 глупых вопроса: 1) test.ucoz.ru - закрыт для индексации yнавсегда? И главным сайтом ВСЕГДА будет test.ru? 2) нужно ли "склеивать" www.test.ru и test.ru? Так как в стандартном файле robots.tx не прописано директива Host или зеркало прописать в вебмастере? заранее спасибо |
|
Елена7980,
Цитата 1) test.ucoz.ru - закрыт для индексации yнавсегда? И главным сайтом ВСЕГДА будет test.ru? но в панели управления в общих настройках есть пункт индексации по обоим доменам, но вам этот пункт не нужен точно Цитата нужно ли "склеивать" www.test.ru и test.ru? |
|
Что вы сделали с юкозом?
Это что, теперь каждый дубль добавленной новости, нужно закрывать в роботсе (так роботса не хватит), или закрывать в каноникал? И где удобство Юкоза? Страница доступна по двум адресам: http://intersnet.ru/news....534-987 http://intersnet.ru/news/s_t_50_pak_fa_opjat_problema/2014-06-10-534 Добавлено (14 Июн 2014, 19:58:44) Цитата zvartnoz ( )а почему так много страниц запрещены к индексации? А нафига вам дубли, и технические страницы в выдаче? Сообщение отредактировал aibolit2007 - Суббота, 14 Июн 2014, 19:25:38
|
|
|
|
Цитата webanet ( )aibolit2007, вам сюда с дублями //forum.ucoz.ru/forum/21-62981-2#1160436 Уж поверьте я знаю как с дублями разбираться! Вы просмотрите адреса: Цитата aibolit2007 ( )Страница доступна по двум адресам: http://intersnet.ru/news....534-987 http://intersnet.ru/news/s_t_50_pak_fa_opjat_problema/2014-06-10-534 Дело в том, что они (дубли), пока не появятся в поиске, их найти невозможно! Если вы считаете что эта тема имеет отношение к "Глюки системы" - то перенесите туда! Думаю, что это проблема перехода, с хтмл 4.1, на хтмл 5 Сообщение отредактировал aibolit2007 - Суббота, 14 Июн 2014, 20:19:55
|
|
aibolit2007, поставьте каноникал как указано в теме и ничего лишнего не появится в поиске. о проблеме -987 известно
|
|
Цитата webanet ( )aibolit2007, поставьте каноникал как указано в теме и ничего лишнего не появится в поиске. о проблеме -987 известно Да не проблема поставить кононикал, лишь бы Вы (Юкоз) проблему убрали! (чтоб на каждом дубле статьи, не пришлось ставить каноникал) И ещё, у меня изменился код страницы (только материал (тексте) новости, статьи, я потихонечку исправляю), можно пересмотреть хотя бы ваше <p></p> - На кой он там? Мая статья не параграф, позвольте мне определять параграфы! У берите его из хтмл кода, который по умолчанию добавляется к статье!!!!!!!! Сообщение отредактировал aibolit2007 - Суббота, 14 Июн 2014, 20:40:17
|
|
aibolit2007, каноникал все равно нужен. 987 не единственная проблема, если вы озабочены дублями
Цитата И ещё, у меня изменился код страницы (только материал (тексте) новости, статьи, я потихонечку исправляю), можно пересмотреть хотя бы ваше <p></p> - На кой он там? |
|
Цитата webanet ( )aibolit2007, поставьте каноникал как указано в теме и ничего лишнего не появится в поиске. о проблеме -987 известно Проблемы нет, просто лишний дубль и как вы предложили каноникал, не вариант для много страничникаБ причина банальна, это лень прописывать каноникал, для каждой страницы. Ниже простой пример решения проблемы, с дублями 987 Для тех кто не в курсе приставьте к адресу любой статьи, новости (-987) и вы увидите дубль страницы!!!! Для борьбы с дублями 987, добавьте в роботс директиву: А эта директива избавит вас от этих дублей!! Disallow: /*987 и дублей не будет, поскольку , все страницы, содержащие это число, будут блокироваться в роботсе! И "нормальный" адрес будет в индексе.   Сообщение отредактировал aibolit2007 - Воскресенье, 15 Июн 2014, 18:56:57
|
|
aibolit2007, не слишком изящное решение. не подойдет сайтам, у которых есть материалы с идом 987
|
|
Цитата webanet ( )aibolit2007, не слишком изящное решение. не подойдет сайтам, у которых есть материалы с идом 987 Много таких? Покажите! Единичные случаи. Проще каноникал прописать, для 800 страниц, или на одной - двух, содержаЩих, число 987? Я ВАС, уже (заранее) люблю! :)   Добавлено (15 Июн 2014, 19:04:24) --------------------------------------------- Идеальное решение, для подавляющего количества сайтов!! Добавлено (15 Июн 2014, 19:11:02) --------------------------------------------- Цитата aibolit2007 ( )Дело в том, что они (дубли), пока не появятся в поиске, их найти невозможно! Ошибался, можно к каждому адресу страницы вашего сайта с новостями, статьями (кроме главной, разделов и категорий) приставьте (-987) и будет дубль! Добавлено (19 Июн 2014, 22:21:36) --------------------------------------------- В статьях, сейчас дубль в хмл отображается (не путать с хтмл), но сути это не меняет! (сохраните страницу из каталога статей и вы увидите что она в хмл!) и она индексируется, если не запретить!  Юкоз юкоз ну сделай хоть это нормально! в новостях все по прежнему, в хтмл! Сообщение отредактировал aibolit2007 - Четверг, 19 Июн 2014, 22:27:38
|
| |||