• Страница 140 из 140
  • «
  • 1
  • 2
  • 138
  • 139
  • 140
Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
Edgar8849
Сообщений: 3
Репутация: -1

Сообщение # 2086 | 00:36:23
Здравствуйте, подскажите как настроить robot.txt чтоб в поиске отображалась одна страница! основная.
worthyhero
Репутация: 0

Сообщение # 2087 | 12:48:18
Добрый день. При создании сайта возникла ситуация когда надо запретить индексацию всех страниц (index) но оставить главную... подскажите как правильно это Выполнить в robots.txt    ?
webanet
Личный менеджер
Сообщений: 23964
Репутация: 4975

Сообщение # 2088 | 13:37:26
worthyhero, вы должны понимать, что заочно составление файла занятие бессмысленное и иногда опасное для индексации. всегда нужно давать адрес сайта. если у вас все по умолчанию, то так
Disallow:/index

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
worthyhero
Репутация: 0

Сообщение # 2089 | 13:47:41
webanet, Это запретит индексацию всех страниц кроме главной ?
Раша
Сообщений: 13
Репутация: 0

Сообщение # 2090 | 11:22:21
Кто скажет (знает) чем отличается допустим Disallow: /search/ в скобках, от Disallow: /search  без скобок. 
Что это означает?
webanet
Личный менеджер
Сообщений: 23964
Репутация: 4975

Сообщение # 2091 | 16:17:47

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
-SAM-
Сообщений: 137
Репутация: 41

Сообщение # 2092 | 23:55:21
Раша, проще говоря - с Disallow: /search не будут индексироваться все страницы поиска, тогда как с Disallow: /search/ - начальная страница его будет продолжать индексироваться. Собственно, по умолчанию так оно и есть:
Цитата agroraiders ()
Disallow: /search/ Запрещает индексирование страницы результатов поиска и тегов
Как видите, написано именно страница результатов.

Ex-ID: 179703 [11 Авг 2012]
Сообщение отредактировал -SAM- - Пятница, 01 Фев 2019, 00:03:39
Prominecrafting
Репутация: 0

Сообщение # 2093 | 11:37:09
Добрый день!

Скажите пожалуйста, как правильно указать в файле robots.txt директивы Allow и Disallow

Есть сайт 100minecraft.ru в котором нужно разрешить индексирование поиска на сайте по ключевым словам, но когда я указываю директиву Allow: /search в файле robots.txt, так поисковая система индексирует непонятные страницы

К примеру в вебмастере показывает что проиндексированы страницы которых очень много и создает ненужные копии:
/search/?q=%D0%A8%D0%B5%D0%B9%D0%B4%D0%B5%D1%80%D1%8B;t=0;p=4;md=dir%7Cload%7Csite%7Cstuff%7Cblog
/search/?q=%D0%9C%D0%BE%D0%B4%D1%8B+%D0%B4%D0%BB%D1%8F+%D0%9C%D0%B0%D0%B9%D0%BD%D0%BA%D1%80%D0%B0%D1%84%D1%82;t=0;p=3;md=dir|load|stuff|site|blog

Как прописать директивы чтобы индексировались только страницы /search/?q=%D0%A8%D0%B5%D0%B9%D0%B4%D0%B5%D1%80%D1%8B;t=0;p=4;md= 

и запретить индексацию dir%7Cload%7Csite%7Cstuff%7Cblog

Добавлено (19 Фев 2019, 12:36:02)
---------------------------------------------

Цитата Prominecrafting ()
и запретить индексацию dir%7Cload%7Csite%7Cstuff%7Cblog


Allow: /search/
Disallow: /*/;md=stuff|load|dir|blog|site/

такие пойдут директивы?

Добавлено (19 Фев 2019, 13:16:24)
---------------------------------------------
или может по другому сделать?

Allow: /search/
Disallow: /search/*stuff|load|dir|blog|site
Disallow: /search/*load|dir|site|blog|stuff
Disallow: /search/*site|blog|stuff|load|dir
Disallow: /search/*dir|blog|load|site|stuff

объясните нубу, потому что экспериментировать можно очень долго smile

Прикрепления: 5763940.png(57.0 Kb)
Kurosava
Сообщений: 18
Репутация: 1

Сообщение # 2094 | 10:24:28
Привет, друзья. Подскажите пожалуйста, как в роботсе закрыть от индексирования страницу архива материалов что в новостях, что в блоге, что в статьях. Не хочу чтобы в индекс яндекса и гугля влетали списки материалов за 2010 - 02 - 33 например и всё такое. Ну чтобы мусора не было. Как таковое сотворить?

Здесь просто написано про индивидуальный дизайн банковских карт. Не заостряйте внимание.
webanet
Личный менеджер
Сообщений: 23964
Репутация: 4975

Сообщение # 2095 | 18:56:23
Kurosava, это нужно делать не роботсом, а с помощью каноникала. в шаблон архива материалов модулей новости и блог в секцию head вставьте
Код
<?if($PAGE_ID$=='day'||$PAGE_ID$=='month'||$PAGE_ID$=='year')?>
<link rel="canonical" href="/" />
<meta name="robots" content="none"/>
<?endif?>

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
  • Страница 140 из 140
  • «
  • 1
  • 2
  • 138
  • 139
  • 140
Поиск: