Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58 04 Апр 2006
Сообщение отредактировал webanet - Вторник, 27 Мар 2018, 20:08:42
-AlexON-
Сообщений: 98
Репутация: 20

Сообщение # 331 | 00:49:06 14 Май 2012
Подскажите пожалуйста как закрыть в роботс файле архив новостей от индексации? //u.to/QF0RAg А то ведь это получаются дубли страниц. Если я в роботс пропишу Disallow: /news/ то закроются и категории...
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 332 | 01:06:03 14 Май 2012
-AlexON-, закройте архив и разрешите индексацию категорий , разделов
geometriya ISO 3166-2 DEE
-AlexON-
Сообщений: 98
Репутация: 20

Сообщение # 333 | 01:20:12 14 Май 2012
Quote (Miss_Esq)
-AlexON-, закройте архив и разрешите индексацию категорий , разделов

то есть в роботс прописать Disallow: /news/ и как дальше? Как разрешить индексацию категорий? Я не понимаю как это прописать в роботс файле?
Capetr
Сообщений: 4
Репутация: 83

Сообщение # 334 | 09:58:31 16 Май 2012
У меня такой вот вопрсик. Мне нужно, чтобы в модуле каталог статей индексировались только материалы. Что нужно прописать в роботс, чтобы закрыть от индексации главную страницу каталога и страницы категорий?
-AlexON-
Сообщений: 98
Репутация: 20

Сообщение # 335 | 10:06:59 16 Май 2012
Мне ответьте пожалуйста //forum.ucoz.ru/forum/21-13447-854620-16-1336944012
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 336 | 12:18:58 16 Май 2012
Capetr,
Quote
У меня такой вот вопрсик. Мне нужно, чтобы в модуле каталог статей индексировались только материалы. Что нужно прописать в роботс, чтобы закрыть от индексации главную страницу каталога и страницы категорий?
без жертв аккуратно и тонко через роботс вы не сделаете что хотите, но вы можете включить аякс переключатель страниц в общих настройках. тогда страницы каталога индексироваться точно не будут
ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Capetr
Сообщений: 4
Репутация: 83

Сообщение # 337 | 12:24:05 16 Май 2012
webanet, у меня аякс включен. Так, а поконкретнее ничего не посоветуете? В роботс тоже надо же, что-то прописать
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 338 | 12:50:17 16 Май 2012
Capetr, если аякс включен то ничего не надо никуда прописывать. эффект уже достигнут. если хотите в этом убедиться, то перейдите на первую страницу каталога и начните листать странички переключателем страниц. при этом внимательно смотрите на адресую строку. вот так вы все поймете
ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Capetr
Сообщений: 4
Репутация: 83

Сообщение # 339 | 12:21:56 24 Май 2012
Подскажите, как закрыть от индексации файлы Excel? У меня прайсы повылазили в поиск вместо нормальных страниц
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 340 | 12:42:15 24 Май 2012
Capetr, пример ....
geometriya ISO 3166-2 DEE
Capetr
Сообщений: 4
Репутация: 83

Сообщение # 341 | 12:52:43 24 Май 2012
Miss_Esq, вот пример скрин
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 342 | 13:06:53 24 Май 2012
Capetr,
help.yandex.ru/webmaster/?id=996567#996572

Disallow: /prajs
Disallow: /prajs/
Disallow: /prajs/$
geometriya ISO 3166-2 DEE
Capetr
Сообщений: 4
Репутация: 83

Сообщение # 343 | 13:13:07 24 Май 2012
Miss_Esq, спасибо. Эти все строки надо прописать в роботс?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 344 | 13:16:49 24 Май 2012
Capetr, да , и почитайте правила для robots.txt по ссылке ....
geometriya ISO 3166-2 DEE
Tear_
Сообщений: 9
Репутация: 14

Сообщение # 345 | 19:35:35 24 Май 2012
Яндекс выдает страницу на версию pda.
надо ли запретить ему мобильную версию?

Code
Disallow: /pda
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: