Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
toka0212
Репутация: 0

Сообщение # 1741 | 19:55:23
Всем доброго времени суток! скажите пожалуйста, как узнать, что у моего сайта закончился время карантина?
Я добавил файл /robots.txt на сайт, а он не меняется.


User-agent: *
Disallow: /


webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1742 | 19:57:29
toka0212,
Цитата
Я добавил файл /robots.txt на сайт, а он не меняется
значит карантин не закончился. подробнее читайте тут //forum.ucoz.ru/forum/21-38597-1

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Comdiv
Сообщений: 131
Репутация: 43

Сообщение # 1743 | 18:35:31
Здравствуйте, объясните пожалуйста, почитал эту тему, так как уже много где прочел, что Robots.txt поменялся и стал намного совершенен, но хотелось спросить у источника.

В первом топе написан а точнее прописан такой Robots.txt - ссылки сменил

Код
User-agent: *Disallow: /a/  
Disallow: /stat/  
Disallow: /index/1  
Disallow: /index/2  
Disallow: /index/3  
Disallow: /index/5  
Disallow: /index/7  
Disallow: /index/8  
Disallow: /index/9  
Disallow: /panel/  
Disallow: /admin/  
Disallow: /secure/  
Disallow: /informer/  
Disallow: /mchat  
Disallow: /search  
Disallow: /shop/order/  
Disallow: /?ssid=  
Disallow: /google  
Disallow: /twitter  
Disallow: /facebook  
Disallow: /yandex  
Disallow: /vkontakte  
Sitemap: http://zornet.ru/sitemap.xml  
Sitemap: http://zornet.ru/sitemap-forum.xml
Sitemap: http://zornet.ru/sitemap-shop.xml


У меня Robots.txt стоит на сайте такой

Код
User-agent: *  
Disallow: /a/  
Disallow: /stat/  
Disallow: /index/1  
Disallow: /index/2  
Disallow: /index/3  
Disallow: /index/5  
Disallow: /index/7   
Disallow: /index/9  
Disallow: /panel/  
Disallow: /admin/  
Disallow: /secure/  
Disallow: /informer/  
Disallow: /mchat  
Disallow: /search  
Disallow: /?ssid=
Disallow: /*&*

Host: zornet.ru

Sitemap: http://zornet.ru/sitemap.xml  
Sitemap: http://zornet.ru/sitemap-forum.xml


Подскажите пожалуйста, какой реально сейчас нужен.
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1744 | 19:02:04
ну можете добавить
Disallow: /twitter
Disallow: /facebook
Disallow: /yandex
Disallow: /vkontakte но можно не добавлять

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Comdiv
Сообщений: 131
Репутация: 43

Сообщение # 1745 | 19:14:12
webanet, спасибо, как понимаю в целом он правильный.

Вот еще, понять не могу и думаю что лишнее в нем

Код
Sitemap: http://zornet.ru/sitemap-shop.xml

Сам так выглядит: http://zornet.ru/robots.txt
Сообщение отредактировал Comdiv - Пятница, 30 Янв 2015, 19:15:07
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1746 | 19:15:38
Comdiv, да. правильный. если магазин не активирован, то лишний

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Comdiv
Сообщений: 131
Репутация: 43

Сообщение # 1747 | 19:20:03
webanet, благодарен, за конкретный и развернутый ответ.
cookie9693
Сообщений: 1
Репутация: 0

Сообщение # 1748 | 20:19:32
Возник вопрос, если закрыть страницу раздел и категорию материалов в каталоге файлов ( пример, Disallow: /load/serialy/1 и Disallow: /load/serialy/zarubezhnye/2 соответственно ), будет ли у меня индексироваться сама страница с материалом ( /load/serialy/america/supernatural/2-1-0-3 ) ?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1749 | 20:29:49
cookie9693, будет
при внесенных правках в файл robots.txt пользуйтесь анализатором от яндекс https://webmaster.yandex.ua/robots.xml

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Alexi6831
Сообщений: 1
Репутация: 0

Сообщение # 1750 | 09:40:43
Скажите пожалуйста : у меня правильный Роботс.тхт?? Вот сайт

Rostislav
Сообщений: 2396
Репутация: 591

Сообщение # 1751 | 12:24:28
Alexi6831,

Цитата Alexi6831 ()
Скажите пожалуйста : у меня правильный Роботс.тхт??


Правильный. У вас стоит системный файл robots.txt, в котором произошло обновление на более актуальную версию

yuriq
Сообщений: 8
Репутация: 1

Сообщение # 1752 | 21:27:29
Скажите пожалуйста : у меня правильный Роботс.тх?

Ссылка на сайт
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1753 | 21:40:42
yuriq, правильный. у вас стоит системный файл. изменять не надо

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
defo6452
Репутация: 0

Сообщение # 1754 | 01:52:20
Вопрос: Уже прошло ровно как месяц а файл как нельзя было менять так и сейчас!?? можете помочь!
_VITALIK_
Сообщений: 696
Репутация: 115
Уровень замечаний:

Сообщение # 1755 | 07:02:38
Цитата defo6452 ()
Вопрос: Уже прошло ровно как месяц а файл как нельзя было менять так и сейчас!?? можете помочь!

defo6452, А вы его не найдёте (файл) . Воспользуйтесь любым текстовым редактором (например, Блокнотом или WordPad), создайте файл с именем robots.txt и кидаете содержимое вот этого

Цитата
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=
Disallow: /abnl/
Disallow: *?

Sitemap: http://ваш сайт/sitemap.xml
Sitemap: http://ваш сайт/sitemap-forum.xml
Sitemap: http://ваш сайт/sitemap-shop.xml


Заливаете на сервер и редактируеете параметры как вам нужно.

Сообщение отредактировал _VITALIK_ - Вторник, 10 Фев 2015, 07:12:08
Поиск: