Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1471 | 00:27:00
Fenix0905, это больше похоже на агс. напишите в тех.поддержку яндекса и задайте им вопрос об индексации своего сайта и на основании ответов можно уже будет думать дальше

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Fenix0905
Сообщений: 42
Репутация: 3

Сообщение # 1472 | 00:33:43
Тоесть Вы хотите сказать, что Яндекс забанил сайт? Маразм какойто, нв бесплатном хостинге был на первых позициях, а прикрепил доммен и попал в бан. Во дела sad

Добавлено (03 Янв 2014, 00:33:43)
---------------------------------------------
Если можно еще вопрос, я когда прикрепил домен, в ПУ установил галочку индексировать сайт по обеим доменам, не может ли эта настройка влиять на индексацию, кроме того, может стоит изменить robots.txt и указать хост?

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1473 | 00:36:04
Fenix0905, в таком плане не может. а хост надо было давно прописать. и если яндекс взял пару страниц по новому домену. он должен был раскрутить остальные страницы. все равно напишите. лучше уточнить у тех.поддержки

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Fenix0905
Сообщений: 42
Репутация: 3

Сообщение # 1474 | 00:49:20
Спасибо за совет, буду пробовать, только судя по отзывам ответ от ЯШИ прийдется ждать долго, да и будет ли результат sad
Что касается хоста, не могу найти файл robots.txt, что делать, создать свой (новый)?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1475 | 00:56:51
Fenix0905,
Цитата
не могу найти файл robots.txt, что делать, создать свой (новый)?
надо залить свой уже готовый с тем же именем

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
апр1698
Сообщений: 62
Репутация: 0

Сообщение # 1476 | 23:13:44
А содержимое файла Robots.txt , уже после карантина, должно ещё будет меняться?
Сообщение отредактировал апр1698 - Суббота, 04 Янв 2014, 23:14:26
лео83
Сообщений: 30
Репутация: 0

Сообщение # 1477 | 20:43:47
Подскажите каким кодом и можно ли вообще в robots закрыть календарь новостей? Это дубли! Очень часто индексируется календарь(типо....www.сайт/news/2014-01-05...) вперед самой новости Как закрыть календарь от индексации!
Сообщение отредактировал лео83 - Воскресенье, 05 Янв 2014, 20:44:37
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1478 | 20:58:37
лео83, почему вы решили, что это дубли?

Цитата
(типо....www.сайт/news/2014-01-05...)
календарь выдает ссылки на материалы. это как раз блочить не надо

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
лео83
Сообщений: 30
Репутация: 0

Сообщение # 1479 | 21:09:59
Цитата webanet ()
календарь выдает ссылки на материалы. это как раз блочить не надо
Это дубли! Их надо закрывать! Гугл стал не умолимо накладывать баны на дубли в последнее время!
Смотрите сами!

www.сайт/news/название статьи/2014-01-05-253 -это раз
www.сайт/news/news/2014-01-05 - это два (календарь)
www.сайт/news/ - это три

В итоге гугл три раза сканирует название новости и краткое содержание! Потом удивляешься а почему сайт вылетел из основной выдачи! А гугл тебе пишет так у вас спам новости дублируются по несколько раз! Поисковик автоматом сайт загоняет под фильтр!

Разделы новостей я знаю как закрыть
Disallow: /news/1Disallow: /news/2
Disallow: /news/3
Disallow: /news/4
Disallow: /news/5

А вот как закрыть календарь не могу сообразить!
Сообщение отредактировал лео83 - Воскресенье, 05 Янв 2014, 21:16:08
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1480 | 21:23:06
лео83,
Цитата
www.сайт/news/news/2014-01-05 - это два (календарь)
www.сайт/news/ - это три
это явно не дубли

Цитата
www.сайт/news/название статьи/2014-01-05-253 -это раз
это ваше чпу. календарь отдает ссылки на материалы с чпу

вы просто колоссально преувеличиваете связь фильтров и дубли страниц. но помочь беде можно
но только не через роботс. в шаблон страница архива материалов пропишите

<link rel="canonical" href="/news/">

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Toyota
Репутация: 0

Сообщение # 1481 | 22:19:27
Не изменяется файл robots.txt... Куплена услуга Премиум. angry

Добавлено (08 Янв 2014, 22:19:27)
---------------------------------------------
И сайт не индексируется ни в Google, ни в Yandex. sad

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1482 | 22:47:24
Toyota, где адрес сайта с купленной услугой и чистили ли вы кеш после заливки файла роботса? иногда кешируется и не видно изменений

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Toyota
Репутация: 0

Сообщение # 1483 | 16:41:39
Цитата webanet ()
Toyota, где адрес сайта с купленной услугой и чистили ли вы кеш после заливки файла роботса? иногда кешируется и не видно изменений

Добавлено (09 Янв 2014, 16:41:39)
---------------------------------------------
Адрес вот: stroy-deli.ucoz.ru

Файл robots.txt надо самому заливать? И подскажите если не трудно как чистить кеш.

Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1484 | 16:53:37
Toyota,
Цитата
Файл robots.txt надо самому заливать?
Если не разбираетесь, если нет нужды в его изменении оставьте системный как есть ...

Toyota
Репутация: 0

Сообщение # 1485 | 18:48:34
Miss_Esq, Но сайт мой не пингуется! unsure

Добавлено (09 Янв 2014, 18:48:34)
---------------------------------------------
Ой shy Не индексируется....

Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: