   | |
| Модератор форума: Yuri_G |
| Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта) |
| Robots.txt |
|
Нажмите на ссылку, чтобы перейти к ответу
Сообщение отредактировал webanet - Вторник, 27 Мар 2018, 20:08:42
|
|
AKIM, Да ..
Quote а нужна ли вот эта строчка и за что она отвечает? Сообщение отредактировал Miss_Esq - Среда, 21 Сен 2011, 09:10:48
|
|
Здравствуйте. Подскажите пожалуйста неопытному вебмастеру. То есть мне
 . В файле robots.txt , который если не изменять самому присутствуют строки : Данные строчки, как я понимаю, запрещают индексацию поисковыми системами страниц сайта http: //ваш_сайт/index/цифра . Причем цифра, как я понял, не ограничивается 9 и может быть 10 и далее до бесконечности. И подобные страницы не должны никогда попадать в индекс поисковиков. Так вот вопрос: Если я создам страницы типа http: //ваш_сайт/index/текст . То есть вместо цифры будет название страницы, например, типа http: //ваш_сайт/index/televidenie_onlajn/0-22 ( Так заканчивается просто окончание одной страницы с моего сайта ) - попадут ли подобные страницы на индексацию в поисковые системы, если там будет уникальное содержание и описание текста и я помещу в различные социальные закладки ссылки на данную страницу ? Подскажите пожалуйста неопытному мне. |
|
astroboy,
Quote попадут ли подобные страницы на индексацию в поисковые системы закрыт от роботов технический индекс и профили юзеров |
|
Quote (weiss) Стандартный robots позволяет наиболее оптимально индексировать сайт, а не мусором забивать поисковые системы. При стандартном Robots.txt все равно попадает в индекс много мусора. Например страницы из какого-то непонятного раздела /gadget |
|
Помогите, плс, разобраться с двумя вопросами! Сайт http://green-tour.at.ua
1) Файл robots.txt у меня стандартный. Соответственно, есть такая строка: Disallow: /index/2 Но, по адресу http://green-tour.at.ua/index/2 у меня происходит переадресация на главную. Это получается, что главная закрыта от индексации??? Что делать в такой ситуации? 2) Правилен ли синтаксис в следующем запрете: Disallow: /index/druzja_sajta/0-10 Спасибо! |
|
Primavera,
1 . Ни чего не делать , всё нормально , главная будет индексироваться ... 2 . Да |
|
Прекрепил домен к новому сайту и добавил в яндекс, после проверки роботом сайт небыл проиндексирован пишет вот что:
 не могу понять в чем проблема. Прикрепления:
6649835.jpg
(34.9 Kb)
Сообщение отредактировал Alexale - Воскресенье, 06 Ноя 2011, 15:21:49
|
|
На сайте модуль Форум и Интернет-магазин отключены и не планирую их активировать. Может стоит убрать из robots.txt эти две строчки?
Sitemap: http://мойсайт/sitemap-forum.xml Sitemap: http://мойсайт/sitemap-shop.xml |
|
Joolz, конечно убирайте их можно вообще не прописывать в робот
|
|
Меня давно интересует один вопрос,комментарии пользователей индексируются поисковиками или нет?Ведь они придают страницам уникальность,в robots.txt они вроде не запрещены,но я никогда не видел чтобы комментарии с моего сайта отображались в поисковиках.
|
|
-nGage-, Нормально " появился " ...
 Скачайте по адресу kinofleshka.ru/robots.txt ( или он списком ниже ) , сохраните в текстовом формате в кодировке utf-8 и закачайте в файловый менеджер .. Сообщение отредактировал Miss_Esq - Суббота, 12 Ноя 2011, 00:58:15
|
| |||