Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 346 | 22:04:09
Tear_, не нужно запрещать пда. у яндекса и гугла есть версии пда
смотрите http://www.google.ru/pda http://www.yandex.ru/m/ и вот для этого сгодится ваша пда версия. они отличают полную и пда, это на тот случай, если вы переживаете за дубли

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Just2632
Сообщений: 6
Репутация: 0

Сообщение # 347 | 15:57:25
Здраствуйте у меня проблема вот в чем: При редактировании robots.txt у меня все отлично всё правильно ввел!


Но когда открываю его на сайте получается обычный стандартный, вот:
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 348 | 16:01:56
Just2632, ну вы и скриншоты заворотили ...
Пока карантин ( 30 дней ) не закончился ни чего вы с файлом не сделаете ...

Just2632
Сообщений: 6
Репутация: 0

Сообщение # 349 | 16:21:54
Quote (Miss_Esq)
Just2632, ну вы и скриншоты заворотили ... Пока карантин ( 30 дней ) не закончился ни чего вы с файлом не сделаете ...

а что со скриншотом, тоесть через 30 дней я поменяю и всё будет норм?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 350 | 17:22:12
Just2632, да

Quote
а что со скриншотом,

прятать в спойлер

Сообщение отредактировал Miss_Esq - Понедельник, 28 Май 2012, 17:22:59
Comping
Сообщений: 15
Репутация: 0

Сообщение # 351 | 11:53:37
У меня такая ситуация. Сайт со стандартным роботс Яндекс проиндексировал все и даже лишнее: "страница добавления материалов". ЕЕ я запрещу к индексу в своем роботс и меня интересует стоит ли запрещать индексировать по категориям? То есть у меня в индекс попали такие страницы как:

CD/DVD - CompUsers.ru - Немного о компьютерах
CompUsers.ru/load/cd_dvd/10

Как сделать? - CompUsers.ru - Немного о компьютерах
CompUsers.ru/publ/1

Интернет - CompUsers.ru - Немного о компьютерах
CompUsers.ru/load/internet/6

и так далее все категории из модулей статьи и загрузки. Стоит ли запрещать их к индексированию?

Пытаюсь что-то делать.
http://compusers.ru/
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 352 | 12:02:06
Comping, не стоит ..

fllop
Сообщений: 72
Репутация: 45

Сообщение # 353 | 15:07:35
Я уже наверно поднадоел со своим роботом happy Но вот ещё один вопросик. Анализирую сайты с хорошей посещаемостью и быстрой индексацией, ну на многих встречаю в роботе такое:

User-Agent: Googlebot
User-agent: Yandex


Что такое?, зачем нужно?, нужно ли вообще? Если нужно, в какие места над/под/чем куда прописать?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 354 | 15:53:37
fllop,
Quote
зачем нужно?,
это если вам нужно задать индивидуальные параметры файла для разных поисковых систем ...

fllop
Сообщений: 72
Репутация: 45

Сообщение # 355 | 16:23:19
Quote (Miss_Esq)
индивидуальные

Что подразумевается под этим словом? В каких случаях это делается? Можно пример?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 356 | 16:26:13
fllop,
Quote
Можно пример?
примеры смотрите в web мастерах соответствующих поисковых систем .....

ADMIN7725
Сообщений: 6
Репутация: 1

Сообщение # 357 | 16:30:36
А почему у меня файл роботс в карантине,и яндекс пишет запрет

Админ всегда прав,даже если он бухой!
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 358 | 16:34:43
ADMIN7725, карантин 30 дней для новых сайтов с запретом индексации

JXL
Репутация: 2

Сообщение # 359 | 12:35:40
Всем привет.
Подскажите, что не так.
Прикрепления: 6058827.jpg (85.0 Kb)
Ferro7
Сообщений: 285
Репутация: 230

Сообщение # 360 | 13:27:22
Quote (JXL)
Подскажите, что не так.


Всё так. На всякий случай, скопируйте это - User-agent: * - и замените первую строчку у себя в файле

Вы полюбили меня. Здесь я. (с)
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: