Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1696 | 22:24:58
Dejet, что именно сейчас творится с каталогом новостей? какие у вас проблемы?
а то что вы указали к модулю новостей вряд ли можно применить
вы лучше скажите что вам нужно

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Dejet
Сообщений: 11
Репутация: 3

Сообщение # 1697 | 22:43:34
Раньше можно было поставить <link rel="canonical" href="$ENTRY_URL$"> и на дубле страницы материала указывалась каноническая страница:
на вот такой странице - мой.сайт/news/bam/2014-10-13-174?lwREEb срабатывал код <link rel="canonical" href="мой.сайт/news/bam/2014-10-13-174"> тем самым указывая, что эта страница мой.сайт/news/bam/2014-10-13-174 правильная.
Сейчас вот такое получается - на вот такой странице - мой.сайт/news/bam/2014-10-13-174?lwREEb срабатывал код <link rel="canonical"
href="мой.сайт/news/bam/2014-10-13-174?lwREEb"> - то есть каноникал не работает.

По поводу
Disallow: /*&*
Disallow: /*?*
если не жалко объясните все же.
Сообщение отредактировал Dejet - Понедельник, 13 Окт 2014, 22:45:03
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1698 | 22:56:45
Dejet, сейчас пока не надо ничего делать. пока наш новый сео модуль не утрясется
но в указанном случае работало Disallow: /*?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
qwerty12345
Репутация: 0

Сообщение # 1699 | 22:23:51
Когда я вбиваю в поисковик Гугл адрес своего сайта на Ucoze, то у меня он отображается в поисковике, а ниже пишет под ним "Описание этого результата недоступно. Причина - файл robots.txt этого сайта." Почему так? Почему под низом не пишет какие-то слова, например, немного содержания статей? Что сделать чтобы под низом что не будь писало? Как относятся поисковики? Не заблокируют ли мой сайт? Как эта фраза влияет на трафик?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1700 | 22:33:33
qwerty12345, наверное поэтому //forum.ucoz.ru/forum/21-38597-1

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Alex9969
Сообщений: 1
Репутация: 0

Сообщение # 1701 | 21:21:03
Вот в чем проблема? я новичок и не знаю в чем же проблема, вот адрес сайта http://fire-hack.ru/
Прикрепления: 8151537.png (26.4 Kb)
_VITALIK_
Сообщений: 696
Репутация: 115
Уровень замечаний:

Сообщение # 1702 | 23:03:52
Цитата Alex9969 ()
Вот в чем проблема? я новичок и не знаю в чем же проблема, вот адрес сайта http://fire-hack.ru/

Alex9969, Во первых В robots.txt вам нужно строчку добавить
Цитата
Host: fire-hack.ru


Цитата
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=
Disallow: /abnl/

Host: fire-hack.ru
Sitemap: http://fire-hack.ru/sitemap.xml
Sitemap: http://fire-hack.ru/sitemap-forum.xml
Sitemap: http://fire-hack.ru/sitemap-shop.xml


А во вторых нужно время для полной индексации, моментально у вас страницы не появятся в поиске, через 2-3 обновления
В третьих - контента маловато на сайте.

Хард
Сообщений: 446
Репутация: 156

Сообщение # 1703 | 13:10:39
Цитата Alex9969 ()
Вот в чем проблема? я новичок и не знаю в чем же проблема, вот адрес сайта http://fire-hack.ru/


Прочитайте данные мануалы:
Вопросы по robots.txt и Как создать Tobots.txt, для чего он нужен и как правильно его настроить.

Модератор в отставке :D
AlexMN93
Сообщений: 9
Репутация: 0

Сообщение # 1704 | 13:30:37
Добрый день! У меня такой вопрос: на сайте стоит скрипт поиска по актерам, в полной новости выводится список актеров, при нажатии на одного из них открывается страница поиска со списком фильмов в которых он снимался, однако в robots.txt стоит значение Disallow: /search, я так понимаю страница не индексируется. Стоит ли убрать это значение из robots.txt для лучшей перелинковки и будут ли санкции со стороны поисковиков?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1705 | 17:11:28
AlexMN93, не стоит убирать. лучшей перелинковки ссылками вида /search/%D0%BE%D0%B1%D0%BE%D0%B вы точно не добьетесь и поисковики не любят страницы поиска или результаты поиска

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
KOKS99
Сообщений: 228
Репутация: 12

Сообщение # 1706 | 12:38:42
Здравствуйте.
http://siegmein.ru/_ph/1/106175675.png
То что обведено я так понимаю блокирует ссылки с тегом <a>
Да?

Добавлено (05 Ноя 2014, 12:38:42)
---------------------------------------------
Мне кажется вот так правильней или нет?
User-agent: *
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=
Disallow: /index/primer_dobavlenija/0-10
Disallow: /index/kak_dobavit_filmy/0-11Host: siegmein.ru

Host: siegmein.ru

Sitemap: http://siegmein.ru/sitemap.xml
Sitemap: http://siegmein.ru/sitemap-forum.xml
Sitemap: http://siegmein.ru/sitemap-shop.xml


http://siegmein.ru - торрент трекер новинки
http://siegmein.ru/forum/4 - Вопрос по игре
Если помог нажми +
Hunter6151
Сообщений: 47
Репутация: 1

Сообщение # 1707 | 17:20:25
Что это значит? Что сайт закрыт к индексации??




Моему сайту под чти год уже.

Есть еще одна проблема не меняеться дата файла ситимап, сказали что можно просто удалить эти 3 файла и через поиск сайта сделать новые ( появяться автоматически. Это так?
Прикрепления: 4471887.png (22.4 Kb)
Yuri_G
uWeb support
uVip manager
Сообщений: 4336
Репутация: 943

Сообщение # 1708 | 18:10:06
Hunter6151, предоставьте ссылку на ваш сайт

Hunter6151
Сообщений: 47
Репутация: 1

Сообщение # 1709 | 18:16:49
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1710 | 18:21:17
Hunter6151, сайт открыт для индексации. какие у вас проблемы?

Цитата
Есть еще одна проблема не меняеться дата файла ситимап, сказали что можно просто удалить эти 3 файла и через поиск сайта сделать новые ( появяться автоматически. Это так?
просто удалить из файлового и потом перейти по ссылкам в модуле поиск по сайту. карты обновятся автоматически

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Поиск: