Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
Amati5210
Сообщений: 125
Репутация: 16

Сообщение # 1891 | 13:08:19
Цитата webanet ()
блокировать страницу 65?
Абсолютно верно smile СПАСИБО!!! Нужно прописывать как в Вашем комментарии

Код
Disallow: /index/uslugi/0-65

или можно оставить как в настоящее время

Код
Disallow: /*http://rem-dom-teh.at.ua/index/uslugi/0-65

Теперь по <link rel="canonical" href="http://rem-dom-teh.at.ua/"> . Нужна эта запись или нет? Я уже прописал её в Главной странице которая с Персональным шаблоном на десктопной версии сайта...

Мой сайт РемДомТех
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1892 | 15:22:04
Amati5210, вы хотя бы иногда читаете мои сообщения? я же сказала, что ваша строчка ошибочная. её нельзя оставлять. если прописали каноникал, то в роботс можно не писать ничего

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
mitinskaya37
Сообщений: 8
Репутация: 0

Сообщение # 1893 | 13:19:36
Цитата
mitinskaya37, как только закончится срок карантина вам надо будет залить на сайт свой файл robots.txt c содержимым
User-agent: *
Disallow: /
как только надо будет разрешить индексацию, вам надо будет просто удалить из файлового менеджера файл robots.txt и он автоматически заменится системным, который уже будет открыт к индексации
webanet, подскажите пожалуйста еще это:
1. О снятии карантина я узнаю, когда в файловом менеджере появится файл Robots, с возможностью редактирования?
2. До этого файл с User-agent: * Disallow: / закачивать не нужно заранее?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1894 | 21:44:52
mitinskaya37, //forum.ucoz.ru/forum/21-38597-1 прочитайте про карантин. как только карантин будет снят, у вас появится возможность заливать свой файл robots.txt

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
rast-codeine
Сообщений: 33
Репутация: 2
Уровень замечаний:

Сообщение # 1895 | 09:42:09
Всем доброе Утро!!!
Подскажите пожалуйста, как повлияет разрешение индексирования /informer/... сайт http://vipsamogon.ucoz.ru/
Ухудшит ли это что нибудь???

Заранее спасибо.

Белый каталог статей: Barnoba.ru
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1896 | 10:17:49
rast-codeine, не повлияет никак в лучшую сторону. дело в том, что информеры можно вставлять двумя способами. первый - это скриптом. второй - это кодом $MYINF_х$
если вставлять все информеры кодом $MYINF_х$, то их содержимое будет правильно индексироваться. если вставлять скриптами и разрешить в роботсе /informer/, то содержимое не будет правильно индексироваться

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
rast-codeine
Сообщений: 33
Репутация: 2
Уровень замечаний:

Сообщение # 1897 | 10:51:28
webanet, Спасибо!!!

Белый каталог статей: Barnoba.ru
livercol
Репутация: 0

Сообщение # 1898 | 14:02:20
Здравствуйте подскажите пожалуйста в чем дело.Вот так выглядит мой robots.txt

Добавлено (17 Июн 2015, 14:00:42)
---------------------------------------------
Здравствуйте подскажите пожалуйста в чем дело.Вот так выглядит мой robots.txt при этом в google webmasters пишет что мой sitemap выдает ошибку и пишет что url запрещен файлом robots txt.В поиске google снипета нет пишет что не возможно отобразить страницу в результате ограничений в файле robots.txt.Подскажите пожалуйста что модно сделать.Мой сайт boxingfights.ucoz.com

Добавлено (17 Июн 2015, 14:02:20)
---------------------------------------------
User-agent: *Allow: /*?page
Allow: /*?ref=
Allow: /stat/dspixel
Disallow: /*?
Disallow: /stat/
Disallow: /index/1
Disallow: /index/3
Disallow: /register
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /index/sub/
Disallow: /panel/
Disallow: /admin/
Disallow: /informer/
Disallow: /secure/
Disallow: /poll/
Disallow: /search/
Disallow: /abnl/
Disallow: /*_escaped_fragment_=
Disallow: /*-*-*-*-987$
Disallow: /shop/checkout/
Disallow: /shop/user/
Disallow: /*0-*-0-17$
Disallow: /*-0-0-

Sitemap: http://boxingfights.ucoz.com/sitemap.xml
Sitemap: http://boxingfights.ucoz.com/sitemap-forum.xml

Прикрепления: 6397412.png (126.8 Kb)
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1899 | 16:07:14
livercol,
Цитата
и пишет что url запрещен файлом robots txt
сайт попал в поиск, когда был на карантине. через время ошибка уйдет. сейчас запрета к индексированию нету

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
livercol
Репутация: 0

Сообщение # 1900 | 03:21:27
Спасибо большое.)))))
xMakedonecx
Сообщений: 30
Репутация: 0
Уровень замечаний:

Сообщение # 1901 | 12:47:04
Столкнулся с такой проблемой. Яндексом исключены из поиска некоторые страницы. К примеру исключена страница http://wo-game.com/photo/30-0-217, после проверки почему оказывается запрещена файле robots.txt Disallow: /*-0-0- Я так понимаю все страницы у которых в адрессе есть -0-0- запрещены к индексации. Это запрет не спроста. Убрать его не проблема. А нужно ли убирать. Редактировать файл robots.txt не рекамендуется. Как быть в этой ситуации. И почему Disallow: /search/ . Зачем запрещать поиск по сайту. Disallow: /index/8,1,,3,5,7,9. Зачем эти страницы запрещать.

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1902 | 16:08:42
xMakedonecx, у вас в роботсе прописано
Disallow: /*0-0-
а надо Disallow: /*-0-0-
исправьте и все. больше ничего не надо

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
zarim
Сообщений: 489
Репутация: 82
Уровень замечаний:

Сообщение # 1903 | 16:13:59
Подскажите, как правильно?:
Disallow: /go?
или
Disallow: /go?*
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1904 | 16:19:49
zarim, Disallow: /*go?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
xMakedonecx
Сообщений: 30
Репутация: 0
Уровень замечаний:

Сообщение # 1905 | 16:44:27
webanet, А остальное лучше не трогать?

Сообщение отредактировал xMakedonecx - Четверг, 18 Июн 2015, 16:44:50
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: