Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
Froize1
Репутация: 0

Сообщение # 271 | 02:37:10
Аааа типа 29 февраля не считается?
Тогда Понял
tilipaka
Сообщений: 42
Репутация: 5

Сообщение # 272 | 01:16:40
Как разрешить индексацию ТОЛЬКО главной, новостей, и страниц, которые я укажу, а остальное запретить? Если можно напримере.

Добавлено (01-Апр-2012, 01:16:40)
---------------------------------------------
Сори, вот только что придумал другой вариант для моего случая, но если кто прокоментирует это - буду благодарен

cobria
Репутация: 3

Сообщение # 273 | 14:59:14
Привет всем,нужна помощь
Добавил сайт в гугл,все индексировалось нормально,но потом неожиданно выдал ошибку в robots.txt

Quote
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.

robots стандарт,ничего не менял
И как же быть
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 274 | 15:01:39
cobria, откройте предупреждения и посмотрите адреса, которые есть в списке предупреждений или дайте хорошо читаемый скрин с деталями предупреждений
так же дайте адрес сайта и укажите когда он был создан

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
cobria
Репутация: 3

Сообщение # 275 | 15:05:54
Quote (webanet)
cobria, откройте предупреждения и посмотрите адреса, которые есть в списке предупреждений или дайте хорошо читаемый скрин с деталями предупреждений
так же дайте адрес сайта и укажите когда он был создан

Сайт: invisible-tm.ru
Был создан года 3 назад
Вот скрин ошибки
Прикрепления: 1431607.jpg (246.1 Kb)
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 276 | 15:13:04
cobria, это прекрасно. ничего не трогайте. перейдите ради интереса на страницу что заблокирована. там помойка каталогов и помойка довольно большая от 1пс. эту помойку вообще не стоит держать на сайте ни под каким видом. тем более не стоит её разрешать к индексированию. так что все отлично. и если в роботе стоял запрет на эту помойку, то верните его снова или удалите помойку.

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
cobria
Репутация: 3

Сообщение # 277 | 15:16:24
Quote (webanet)
cobria, это прекрасно. ничего не трогайте. перейдите ради интереса на страницу что заблокирована. там помойка каталогов и помойка довольно большая от 1пс. эту помойку вообще не стоит держать на сайте ни под каким видом. тем более не стоит её разрешать к индексированию. так что все отлично. и если в роботе стоял запрет на эту помойку, то верните его снова или удалите помойку.

Так помойка обязательная,ведь это после раскрутки через 1ps,сказали обязательно нужен

Quote
и если в роботе стоял запрет на эту помойку, то верните его снова или удалите помойку.

Что значит вернуть?Я его и не убирал,а гугл то жалуется
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 278 | 15:24:05
cobria, такая раскрутка вам точно не нужна. устраивать на сайте линкопомойку по-любому не стоит. тем более не стоит огорчаться таким запретам. огорчаться нужно не подобным предупреждениям. огорчаться нужно индексации. из загруженых очень мало проиндексировано для сайта которому 3 года. у трехлеток и выше столбцы загрузки и идексации должны быть равными. плюс-минус пару процентов

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
cobria
Репутация: 3

Сообщение # 279 | 15:39:28
Quote (webanet)
obria, такая раскрутка вам точно не нужна. устраивать на сайте линкопомойку по-любому не стоит. тем более не стоит огорчаться таким запретам. огорчаться нужно не подобным предупреждениям. огорчаться нужно индексации. из загруженых очень мало проиндексировано для сайта которому 3 года. у трехлеток и выше столбцы загрузки и идексации должны быть равными. плюс-минус пару процентов

Просто деньги уже потрачены на 1ps,а если уберу мусорку 1ps,то боюсь страницы повылетают,а мало страниц в индексе,потому что сайт пустой стоял очень долго и не сразу был добавлен в индекс

Добавлено (06-Апр-2012, 15:29:15)
---------------------------------------------

Quote
тем более не стоит огорчаться таким запретам

Я бы не обращал внимания,но google перестал индексировать страницы и пару десятков уже вылетели

Добавлено (06-Апр-2012, 15:36:18)
---------------------------------------------
webanet, может как то сделать,что бы данная страница не индексировалась?Но сайтмап не отредактировать

Добавлено (06-Апр-2012, 15:39:28)
---------------------------------------------
Пропала помощь(

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 280 | 15:56:48
cobria, оно и так не индексируется вход закрыт для гостей http://www.invisible-tm.ru/index/1ps/ не обращайте внимание на предупреждение. гугл не из-за этого не индексирует. то не из-за этой ошибки

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
cobria
Репутация: 3

Сообщение # 281 | 16:01:05
Quote (webanet)
cobria, оно и так не индексируется вход закрыт для гостей http://www.invisible-tm.ru/index/1ps/ не обращайте внимание на предупреждение. гугл не из-за этого не индексирует. то не из-за этой ошибки

Все равно как то не приятно,можно как то исправить это?
Gorbunov-Valera
Репутация: 0

Сообщение # 282 | 13:27:19
Всем привет! biggrin

Сайт http://master-krasoti.ru/

Подскажите пожалуйста, кто знает!

Можно закрыть от индексации страницу архива новостей!
/news
/news/3 и тд. их много разных...

Чтобы в поиске были только: главная стр., категории и стр. материала и комент. к нему!

Я сделал в архиве чтобы было 50 новостей, чтобы с главной убрать переключатель стр. (то же наверно не правильно?)

Спасибо за внимание smile
Сообщение отредактировал Gorbunov-Valera - Воскресенье, 08 Апр 2012, 13:29:34
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 283 | 13:42:04
Gorbunov-Valera,
Quote
чтобы с главной убрать переключатель стр.
поставьте аякс переключатель и не мучайтесь. нехорошо будет если пол сайта будут закрыты

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Gorbunov-Valera
Репутация: 0

Сообщение # 284 | 14:24:34
webanet

Я изменяюсь может не так правильно выражаюсь:)))
Просто новичок!

Мне не нужен архив и "переключатели" на него! (архив - это по сути дубли моих категорий)

Надо только: главная стр., категории и стр. материала!!!

Чтобы в поиске были только нужные страницы сайта!

Как вот этого добиться???

Добавлено (08-Апр-2012, 14:23:36)
---------------------------------------------
webanet,

Если закрыть от индексации

/news - архив!

то и категории тоже закроются

/news/stilist/1-0-20 - категория!

Вы наверно это имеете в виду?
Сообщение отредактировал Gorbunov-Valera - Воскресенье, 08 Апр 2012, 14:24:59
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 285 | 14:47:46
Gorbunov-Valera, именно! мне проще было решить то, что вы задумали. я просто не использую модуль новости сайта для новостей. поэтому главная и адрес/news идентичны, а вот в шаблон адрес/news у меня прописано <link rel="canonical" href="адрес главной"/>

если вы не хотите индексации новостей на сайте и хотите оставить только главную, то тоже можете прописать <link rel="canonical" href="адрес главной"/> в шаблон архива материалов. но тогда новости добавленные в модуль новости и ваши категории не будут индексироваться и выпадут из индекса.
если надо убрать переключатели, то попробуйте в настройках модуля новости сайта поставить разные значения. если не поможет задайте такие значения
Количество материалов на главной странице: 50

Количество материалов на странице в архиве: 1

переключатель, если не удёт, то при переходе по страницам будет открываться только 1 материал

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Поиск:
Telegram
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!