Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 496 | 14:50:40
Qasimov, зачем ваш рассказ? где адрес сайта и крепился ли к нему домен

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
djtugarin1
Сообщений: 64
Репутация: 34

Сообщение # 497 | 18:53:47
Всем привет! кто подскажет мне что делать. У меня сайт уже около 3 лет, индексация проходит нормально, ТИЦ=10 , на дня решил оплатить отключение рекламы за 1 год и взял домен в подарок. Пользуюсь метрикой от яндекса, поставил в яндексе зеркало , но основной домен оставил преждний потому что у меня все страницы давно в поиске. на днях получил(примерно через неделю после приобретения нового домена) письмо:
наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt. Пожалуйста, воспользуйтесь формой проверки. Если запрет все еще присутствует, то по вопросу устранения этой проблемы Вам нужно обратиться к администратору Вашего сайта или хостеру.Если сейчас запрет отсутствует, то статус сайта обновится в течение 2–3 дней. Что делать? Подскажите, у меня 2 сайта и на оба такое сообщение.

Добавлено (04-Сен-2012, 18:53:47)
Все спасибо нашел ответ вот тут: //forum.ucoz.ru/forum/21-38634-1
---------------------------------------------
ах да сайты вот: picunda.my1.ru - picunda.net
nafon.my1.ru - newafone.ru

http://picunda.net - мой первый сайт !!!
Сообщение отредактировал djtugarin1 - Вторник, 04 Сен 2012, 19:06:04
hrundik5539
Сообщений: 9
Репутация: 3

Сообщение # 498 | 19:23:23
Quote (agroraiders)
Со стандартным robots.txt сайт индексируется наиболее правильно. Мы его настраивали так, чтобы индексировались только страницы с информацией а не все подряд (например страница входа или регистрации). Таким образом сайты пользователей uCoz быстро индексируются и получают больший приоритет нежели сайты, в которых индексируется весь мусор и ненужные страницы.

МЫ НАСТОЯТЕЛЬНО РЕКОМЕНДУЕМ НЕ ЗАМЕНЯТЬ СТАНДАРТНЫЙ ФАЙЛ robots.txt НА СВОЙ.


Обратил внимание, что Яндекс вообще не индексирует сайт. Получается проблема в robots.txt Его настройки я не менял.
Сообщение отредактировал hrundik5539 - Вторник, 04 Сен 2012, 19:23:54
Atlantirus
Сообщений: 78
Репутация: 12

Сообщение # 499 | 19:26:00
djtugarin1, поставьте галочки в Панелях управления, в общих настройках:

1. Автоматически перенаправлять со стандартного домена на прикрепленный
2. Домен DOMAIN является приоритетным
3. Использовать имя прикрепленного домена для изображений внутри материалов

Снимите галочку (если стоит) там же
Разрешать индексацию по обоим доменам

В шаблонах, материалах и меню замените ссылки со старого имени но новое.

Добавлено (04-Сен-2012, 19:26:00)
---------------------------------------------
И добавьте в Яндекс.Вебмастер новые адреса сайтов, а старые удалите.


Все спасибо в репутацию и награды.
Qasimov
Сообщений: 3
Репутация: 0

Сообщение # 500 | 00:44:04
У меня robots.txt имеет вот такой вид User-agent: *
Disallow: / как не пытаюсь отредактировать его ни как не меняется в чем причина помогите пожалуйста. Сайту уже 5 месяцев

Добавлено (06-Сен-2012, 00:44:04)
---------------------------------------------
а вот и адресс сайта www.kinoman.ucoz.lv

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 501 | 00:44:44
Qasimov, вы вопросы, которые вам задали видели вообще или нет?
где адрес сайта?
крепился ли к сайту домен?
стоит ли заглушка +18?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 502 | 03:56:54
Qasimov,
Quote
в чем причина помогите пожалуйста
За порнорекламу, на раз, получите заглушку + 18 ...

Сообщение отредактировал Miss_Esq - Четверг, 06 Сен 2012, 03:58:54
Qasimov
Сообщений: 3
Репутация: 0

Сообщение # 503 | 18:13:11
Quote (webanet)
крепился ли к сайту домен?

нет не крепился

Добавлено (06-Сен-2012, 18:13:11)
---------------------------------------------

Quote (Miss_Esq)
За порнорекламу, на раз, получите заглушку + 18 ...

не делал я ни какой порнорекламы. Я хотел редактировать текстовый файл до окончания карантина может ли это стать причиной этому
๖ۣۜStsepelin
Сообщений: 23
Репутация: 0

Сообщение # 504 | 21:07:34
Вопрос: Во время карантина robots.txtсвыгладит как
Code
User-agent: *   
   Disallow: /a/   
   Disallow: /stat/   
   Disallow: /index/1   
   Disallow: /index/2   
   Disallow: /index/3   
   Disallow: /index/5   
   Disallow: /index/7   
   Disallow: /index/8   
   Disallow: /index/9   
   Disallow: /panel/   
   Disallow: /admin/   
   Disallow: /secure/   
   Disallow: /informer/   
   Disallow: /mchat   
   Disallow: /search

А после карантина как?
Сообщение отредактировал ๖ۣۜStsepelin - Пятница, 07 Сен 2012, 21:08:04
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 505 | 22:05:59
๖ۣۜStsepelin, это после карантина. во время карантина выглядит так

Code
User-agent: *
Disallow: /

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
agentpb
Репутация: 0

Сообщение # 506 | 00:01:33
После добавления сайта на Яндекс, пишет следующие:

Сайт не участвует в поиске, так как ранее наш робот получил полный запрет на его индексирование в Вашем файле robots.txt. В настоящий момент запрет отсутствует, сайт уже начал индексироваться и должен появиться в поиске после 1–2 обновлений поисковых баз, после этого сообщение обновится.

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: http://мой сайт/sitemap.xml
Sitemap: http://мой сайт/sitemap-forum.xml
Sitemap: http://мой сайт/sitemap-shop.xml
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 507 | 01:12:32
agentpb, читайте //forum.ucoz.ru/forum/21-38581-1

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
agentpb
Репутация: 0

Сообщение # 508 | 17:02:48
Quote (webanet)
agentpb, читайте //forum.ucoz.ru/forum/21-38581-1


читали, теперь пишет

Через время эта информация исчезнет? т.к. добавляли сайт, когда он бы на карантине. Потом удалили и залили после карантина

Сайт не проиндексирован из-за запрета в robots.txt

Проверка выявила полный запрет на индексирование сайта в вашем файле robots.txt, поэтому сайт не будет обходиться роботом Яндекса. Пожалуйста, воспользуйтесь формой проверки. Если сейчас запрет отсутствует, то сайт начнет индексироваться в течение 2 недель, после чего сообщение обновится. Если запрет все еще присутствует, то по вопросу устранения этой проблемы Вам нужно обратиться к администратору вашего сайта или хостеру.

Добавлено (11-Сен-2012, 17:02:48)
---------------------------------------------
Может хоть кто-то ответить?

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 509 | 17:08:13
agentpb, что вам ответить? все что можно было, вам уже дали. вы знаете адрес своего сайта, а мы не знаем. а гадать по адресу http://адрес сайта.ucoz.ru/ довольно сложно.
и яндекс уже вам написал ждать 2 недели. проверяйте свой роботтекст сами. и если он открыт, то ждите 2 недели. 2 недели с первого вашего запроса не прошло

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
agentpb
Репутация: 0

Сообщение # 510 | 15:15:21
Quote (webanet)
agentpb, что вам ответить? все что можно было, вам уже дали. вы знаете адрес своего сайта, а мы не знаем. а гадать по адресу http://адрес сайта.ucoz.ru/ довольно сложно.
и яндекс уже вам написал ждать 2 недели. проверяйте свой роботтекст сами. и если он открыт, то ждите 2 недели. 2 недели с первого вашего запроса не прошло


Спасибо, я свою проблему уже решила!
Поиск:
Telegram
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!