Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58 04 Апр 2006
Сообщение отредактировал webanet - Вторник, 27 Мар 2018, 20:08:42
_VITALIK_
Сообщений: 696
Репутация: 115
Уровень замечаний:

Сообщение # 1786 | 00:37:02 23 Мар 2015
Цитата MercadoR ()
А время учитывается ? ([23.02.2015, 16:32]) или просто ждать пока месяц пройдет ?

MercadoR, Для вас 2, 3 часа роль какую то играет ? Смотрите переодически по этому адресу
Цитата
http://ваш сайт.ru/robots.txt
MercadoR
Сообщений: 116
Репутация: 0

Сообщение # 1787 | 06:11:39 23 Мар 2015
_VITALIK_, Особо не играет, просто поинтересоваться решил biggrin
Время - удивительная штука. Его так мало, когда опаздываешь и так много, когда ждешь.

Фильмы онлайн - kinogoll.ru
MercadoR
Сообщений: 116
Репутация: 0

Сообщение # 1788 | 16:06:29 23 Мар 2015
Чет долго запрет снимается angry
Время - удивительная штука. Его так мало, когда опаздываешь и так много, когда ждешь.

Фильмы онлайн - kinogoll.ru
Сообщение отредактировал MercadoR - Понедельник, 23 Мар 2015, 16:11:29
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1789 | 16:13:17 23 Мар 2015
MercadoR, считайте дни внимательно
//forum.ucoz.ru/forum/21-13447-1250356-16-1427038330
ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Dogica
Сообщений: 1230
Репутация: 353
Уровень замечаний:

Сообщение # 1790 | 21:20:11 24 Мар 2015
услышал такое мнение что кроме 301 редиректа стоит прописать основной хост в Роботс.тхт
как это сделать?

это показывает что сайтом занимаются.. хотя бы поэтому smile

WWW.DOGICA.COM / WWW.DOGICA.ORG
_VITALIK_
Сообщений: 696
Репутация: 115
Уровень замечаний:

Сообщение # 1791 | 21:35:15 24 Мар 2015
Dogica, Вы про это ?

Цитата
Host: ваш сайт.ru
Sitemap: http://ваш сайт.ru/sitemap.xml
Sitemap: http://ваш сайт.ru/sitemap-forum.xml
Сообщение отредактировал _VITALIK_ - Вторник, 24 Мар 2015, 22:04:41
Dogica
Сообщений: 1230
Репутация: 353
Уровень замечаний:

Сообщение # 1792 | 16:26:23 25 Мар 2015
думаю оно самое, Виталик
спасибо.. ща добавлю
надеюсь данная директива не портит ничего по дороге

WWW.DOGICA.COM / WWW.DOGICA.ORG
_VITALIK_
Сообщений: 696
Репутация: 115
Уровень замечаний:

Сообщение # 1793 | 16:52:52 25 Мар 2015
Цитата Dogica ()
данная директива не портит ничего по дороге

Dogica, Данная деректива и должна стоять в обязательном порядке , если конечно домен свой
Сообщение отредактировал _VITALIK_ - Среда, 25 Мар 2015, 16:54:15
_aleksey_
Маркетолог
Сообщений: 190
Репутация: 64

Сообщение # 1794 | 17:02:11 25 Мар 2015
Цитата _VITALIK_ ()
Данная деректива и должна стоять в обязательном порядке , если конечно домен свой

Цитата Dogica ()
это показывает что сайтом занимаются.. хотя бы поэтому

Директива Host не является обязательной в списке правил robots.txt Использовать ее или нет - каждый решает сам. Также она не является показателем качества ресурса и не говорит о том, что "сайтом занимаются".

Ее использовать нужно только в случаях, если необходимо передать указания зеркальщику Яндекса. Только Яндекс "понимает" это правило.

Также заметьте, если у вас нет прикрепленного домена - для вас она даже чисто теоретически бесполезна.
Мне можно задать любые вопросы по продвижению, внутренней оптимизации uCoz-сайтов и SEO-модулю.
_VITALIK_
Сообщений: 696
Репутация: 115
Уровень замечаний:

Сообщение # 1795 | 17:04:34 25 Мар 2015
Цитата _aleksey_ ()
Ее использовать нужно только в случаях, если необходимо передать указания зеркальщику Яндекса. Только Яндекс "понимает" это правило.

_aleksey_, В курсе
Triste
Сообщений: 9
Репутация: 0

Сообщение # 1796 | 12:18:10 27 Мар 2015
Вот новый robots.txt который представил ЮКОЗ. Ответьте пожалуйста, то что я выделил черным, за какие страницы они отвечают и какую несут пользу? Заранее спасибо

User-agent: *
Allow: /*?page
Allow: /*?ref=
Disallow: /*?
Disallow: /stat/
Disallow: /index/1
Disallow: /index/3
Disallow: /register
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /index/sub/
Disallow: /panel/
Disallow: /admin/
Disallow: /informer/
Disallow: /secure/
Disallow: /poll/
Disallow: /search/
Disallow: /abnl/
Disallow: /*_escaped_fragment_=
Disallow: /*-*-*-*-987$
Disallow: /shop/checkout/
Disallow: /shop/user/
Disallow: /*0-*-0-17$
Disallow: /*0-0-
_aleksey_
Маркетолог
Сообщений: 190
Репутация: 64

Сообщение # 1797 | 12:38:10 27 Мар 2015
Цитата Triste ()
за какие страницы они отвечают и какую несут пользу? Заранее спасибо
Убирают из выдачи или позволяют выпасть различным системным урлам - страницам соц. авторизации, системным страницам сортировок, ленточным вариантам форума, правилам форума и еще куче специфических урлов. Также в выделенных вами фрагментах есть 2 правила для модуля ИМ.
Мне можно задать любые вопросы по продвижению, внутренней оптимизации uCoz-сайтов и SEO-модулю.
Triste
Сообщений: 9
Репутация: 0

Сообщение # 1798 | 13:02:22 27 Мар 2015
_aleksey_, Спасибо большое, значит можно спокойно прописывать в своем robots.txt новые значения?
_aleksey_
Маркетолог
Сообщений: 190
Репутация: 64

Сообщение # 1799 | 13:07:48 27 Мар 2015
Цитата Triste ()
_aleksey_, Спасибо большое, значит можно спокойно прописывать в своем robots.txt новые значения?
Это универсальный набор правил, поэтому в подавляющем большинстве случаев его вполне можно использовать.

Также рекомендую добавить сайт в панели вебмастера - там также много полезной информации относительно сайта и его индексации.
Мне можно задать любые вопросы по продвижению, внутренней оптимизации uCoz-сайтов и SEO-модулю.
Triste
Сообщений: 9
Репутация: 0

Сообщение # 1800 | 13:16:32 27 Мар 2015
Цитата _aleksey_ ()
Также рекомендую добавить сайт в панели вебмастера - там также много полезной информации относительно сайта и его индексации.

Вы имеете в виду в панель вебмастера поисковиков гугл и яндекс? Немного не понял
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: