Модератор форума: Yuri_G |
Сообщество uCoz » Вебмастеру » Общие вопросы от вебмастеров » Как закрыть от индексации в поисковиках страницы без ЧПУ (Почему на сайте одни и та же страница с ЧПУ и без) |
Как закрыть от индексации в поисковиках страницы без ЧПУ |
Поисковики индексируют сотни страниц моего сайта с ЧПУ и без. Пример одной и той же статьи http://polnaya-modnica.ru/news....29-3034 и http://polnaya-modnica.ru/news/2017-12-29
Из-за этого возникают дубли страниц. Мало того, в поисковиках индексируются страницы без ЧПУ а с ним - нет. Как сделать, чтобы страницы без ЧПУ закрыть от индексации. Повторяю их сотни, конкретно более полутора тысяч и в ручную это сделать очень сложно. Времени займет очень много. Может есть более простой способ запрета всех страниц без ЧПУ сразу? |
Но тогда под запрет попадет и с ЧПУ http://polnaya-modnica.ru/news....29-3034 ведь news в нормальном url с ЧПУ тоже присутствует. А если по годам сделать типа
Disallow: /news/2010 Disallow: /news/2011 Disallow: /news/2012 Disallow: /news/2013 Disallow: /news/2014 Disallow: /news/2015 Или это не правильно? |
Хотелось бы однозначный ответ от специалистов Ucoz можно ли так прописать запреты. И еще один вопрос еще более важный, в индексирование Яндекса вовсе попадают страницы добавления материала, то есть страницы, где пишется сама статья и куда есть доступ только администратору. Как запретить индексацию этих страниц?
|
Tess1919, Как закрыть от индексации в поисковиках страницы без ЧПУ
Добавлено (25 Мар 2018, 16:40:39) Tess1919, Тут один спциалист остался. Врятли тут остались специалисты, это во первых. А во вторых - директивы для всех едины, хоть для uCoz, что для любой другой СМС. |
Tess1919, удалите с роботса то что вы прописали. ваш пример одна страница материал, другая календарь. в секцию head шаблона архива новостей вставьте
Код <?if($PAGE_ID$=='day'||$PAGE_ID$=='month'||$PAGE_ID$=='year')?> <link rel="canonical" href="$HOME_PAGE_LINK$" /> <meta name="robots" content="noindex, nofollow"/> <?endif?> как только начнет срабатывать яндекс может начать сообщать о не канонических страницах. реагировать не надо. после этого сообщения страницы календаря ПОСТЕПЕННО уйдут из поиска |
Здравствуйте, пишу снова по данной теме спустя 10 месяцев. К сожалению, проблема индексации поисковиками страниц календаря с помощью
<?if($PAGE_ID$=='day'||$PAGE_ID$=='month'||$PAGE_ID$=='year')?> <link rel="canonical" href="$HOME_PAGE_LINK$" /> <meta name="robots" content="noindex, nofollow"/> <?endif?> до сих пор не решена. В скриншоте ниже показаны данные с Яндекс-вебмастера. Страницы календаря по-прежнему индексируются. Может есть другой способ избавиться от этих страниц, которые создают множество дублей? Прикрепления:
6247971.jpg
(48.4 Kb)
|
Tess1919, можно весь скрин? и там статус n/a робот проходил все ссылки. и там правильно стоит каноникал пример http://polnaya-modnica.ru/news/2015-04-10
|
К сожалению, сделать скриншот всей страницы не получится, она большая. Прилагаю скриншот начала страницы. Каноникал стоит правильно, как я показала в предыдущем сообщении между тегами <Head> и </Head>. Сперва Яндекс и вправду блокировал неканонические страницы долгое время, но теперь он как будто возвращает их обратно. Хотя конечно, я не спец? может и ошибаюсь. Но как видите такие страницы по прежнему в индексе. И Яндекс как бы по новой находит неканонические страницы за разные годы и индексирует их.
Прикрепления:
4137836.jpg
(77.8 Kb)
|
Tess1919, у вас есть в индексе страницы без чпу пример http://polnaya-modnica.ru/news/2008-03-10-83 но это не из-за дублей календаря. это из-за того, что к древним материалам у вас просто не прописано чпу
|
Ну вот не древний. Октябрь 2018 http://polnaya-modnica.ru/news/2018-10-18 почему попадает в индекс? Он же должен отмечаться как неканонический. Можно ли как-то сделать, чтобы на сайте статьи вообще не появлялись с подобными адресами? Только с ЧПУ были
Сообщение отредактировал Tess1919 - Среда, 23 Янв 2019, 19:20:20
|
Tess1919, там как раз и стоит каноникал
Код <link rel="canonical" href="http://polnaya-modnica.ru/" /> <meta name="robots" content="noindex, nofollow"/> |
Ну а почему страницы с таким url вообще появляются? Есть ли возможность сделать так, чтобы они не появлялись вообще? Это как бы и не полный материал и не материал в рубрике, а что-то среднее, куда с сайта даже не зайти. Зачем мне эти лишние страницы?
Сообщение отредактировал Tess1919 - Среда, 23 Янв 2019, 19:47:56
|
| |||