Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
zarim
Сообщений: 489
Репутация: 82
Уровень замечаний:

Сообщение # 1906 | 16:45:41
webanet, разьве так? Я может не совсем понятно описал вопрос... если я хочу запретить к индексу проксированные ссылки вида: http://мой.сайт/go?http://чужой.сайт/, то зачем мне * перед go?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1907 | 16:53:59
zarim, я очень хорошо поняла ваш вопрос и узнаю элемент проксирования без ваших подсказок
Цитата
то зачем мне * перед go?
чтобы не задавать вопрос зачем, нужно пройти сюда https://webmaster.yandex.ua/robots.xml и проверить мой вариант

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1908 | 16:54:25
xMakedonecx, остальное трогать не надо

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
xMakedonecx
Сообщений: 30
Репутация: 0
Уровень замечаний:

Сообщение # 1909 | 17:01:59
webanet, Спасибо. А такой вопрос, поможете. У меня на главной странице этого сайта. блоки вертикальные, а как сделать горизонтальные.

zarim
Сообщений: 489
Репутация: 82
Уровень замечаний:

Сообщение # 1910 | 17:22:03
Цитата webanet ()
чтобы не задавать вопрос зачем, нужно пройти сюда https://webmaster.yandex.ua/robots.xml и проверить мой вариант

Загружаю робот текст, проверяем урл: /go?http://чужой.сайт/
Ваш вариант (при Disallow: /*go?), ответ: "запрещен правилом /*go?*"
Мой вариант (при Disallow: /go?), ответ: "запрещен правилом /go?"
... вот и пытался понять, как же правильно smile
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1911 | 18:36:19
xMakedonecx, эта тема явно не про блоки
zarim, в вашем случае все равно

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
mitinskaya37
Сообщений: 8
Репутация: 0

Сообщение # 1912 | 21:43:15
Как запретить индексирование некоторых модулей?
1. карантин закончился
2. роботс залит пока с содержимым:
User-agent: *
Disallow: /
3. Задача перед добавлением в поисковики скрыть из главного меню эти модули за ненадобностью (пока)
4. удаление в "неактивные" не подойдет - шаблон из магазина - слетит. Пусть пока подождут, не решил как использовать
а именно:
  • Каталог файлов
  • Гостевая книга
  • Блог
  • FAQ
  • Игры

Удалю свой роботс - восстановится системный, так вот как все правильно прописать в нем? подскажите пожалуйста
Если не затруднит дайте текст файла robots
Первый раз такая задача - боюсь ошибиться.
Спасибо.
zarim
Сообщений: 489
Репутация: 82
Уровень замечаний:

Сообщение # 1913 | 23:46:41
mitinskaya37, вы не переживайте, яндекс может ещё месяц думать: индексировать или нет, гугл - шустрее.
А зачем скрывать? Ну будете вы на 10500 позиции в поиске, кто вас увидит?
mitinskaya37
Сообщений: 8
Репутация: 0

Сообщение # 1914 | 07:59:50
zarim, спасибо за совет.
Если я вас правильно понял, то если они пустые, то будут болтаться сами по себе где-то совсем далеко.
Достаточно убрать их из Меню, чтобы пользователей не смущать? (а я об этом даже и не подумал).
Сообщение отредактировал mitinskaya37 - Среда, 24 Июн 2015, 08:00:15
zarim
Сообщений: 489
Репутация: 82
Уровень замечаний:

Сообщение # 1915 | 12:37:23
Цитата mitinskaya37 ()
Достаточно убрать их из Меню, чтобы пользователей не смущать?

Да, этого вполне достаточно.
aleksej5791
Сообщений: 28
Репутация: 0

Сообщение # 1916 | 21:03:18
Здравствуйте! В яндексе почему-то не индексируются картинки. Может дело в файле robots.txt
Вот пациент - <http://donovedenie.ru/robots.txt>
Сообщение отредактировал aleksej5791 - Пятница, 26 Июн 2015, 21:04:03
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1917 | 21:07:48
aleksej5791, ваш роботс не блокирует индексацию картинок

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
aleksej5791
Сообщений: 28
Репутация: 0

Сообщение # 1918 | 22:59:03
Цитата webanet ()
не блокирует индексацию картинок
А вообще, он нормальный?
barocha69
Сообщений: 95
Репутация: 34

Сообщение # 1919 | 14:37:37
Цитата aleksej5791 ()
А вообще, он нормальный?

Яндекс или роботс?
Яндекс однозначно нет )) а роботс надо смотреть
idjer83
Сообщений: 88
Репутация: 4

Сообщение # 1920 | 15:48:39
Здравствуйте! Проблемы с яндексом, не хочет индексировать, сначала он мне написал вот это


Потом я сделал проверку и он мне написал это

И вот что у меня в итоге

Стоит стандартный robots.txt добавил только Host:http://uslugi-v-gorode.ru/
В итоге сайт у меня не проиндексирован. Кто сталкивался с такой же проблемой? Подскажите что делать кто знает?
Прикрепления: 1741308.png (20.0 Kb) · 5093612.png (3.5 Kb)
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: