Чат сообщества
   | |
| Модератор форума: Yuri_G |
| Сообщество uCoz Вебмастеру Раскрутка сайта Индексирование сайта запрещено в файле robots.txt (ошибки индексирования при снятом карантине) |
| Индексирование сайта запрещено в файле robots.txt |
 Проблема На сайте стандартный robots.txt карантин закончился, а в вебматере Яндекса есть запись "Ваш сайт не проиндексирован Яндексом.(Индексирование сайта запрещено в robots.txt? Если вы исправили robots.txt, необходимо заново добавить сайт в очередь на индексирование.)"  Причины 1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Яндекса проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками 2) Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Яндекса и смотрите информацию по старому 3) Ошибки в файле robots.txt, если составлен и залит некорректный по содержанию файл. Во избежании ошибок, если вы не разбираетесь в этом, пользуйтесь стандартным. Проблема Вебмастер Google - ошибки сканирования - заблокирован файлом robots.txt. На сайте карантин закончился Причины 1) Вы добавили сайт в вебмастер и на индексацию во время карантина, при добавлении сайта робот Google проверил сайт и выдал ошибку. Даже, если карантин уже закончился, информация об ошибке может ещё какое-то время провисеть, так как подобная информация изменяется с задержками 2) Если сайт давно проиндексирован и вы получили инфо о запрете проиндексированных страницах. Вы прикрепили к сайту домен и у вас не стоит настройка индексации по двум доменам. Это значит, что старый юкозовский домен закрыт от индексации, а вы не добавили информацию о новом домене в вебмастер Google и смотрите информацию по старому 2) Если сайт снят с карантина давно и индексируется нормально, то смотрите список заблокированных страниц, которые выдает Google. Перейдите по ссылкам, которые указаны в списке как заблокированные. Это должны быть все страницы запрещенные в robots.txt и вебмастер выдает по ним техническую информацию. Реагировать на это не надо, даже если список большой Проблема Яндекс при обработке robots.txt выдает ошибку - "Обнаружена неизвестная директива" Причина 1) Была прописана несуществующая директива 2) Ошибки синтаксиса и запрещенные символы и теги |
|
work4410, ваш сайт создан позавчера и находится на карантине. подробнее про карантин //forum.ucoz.ru/forum/21-38597-1
|
|
Добрый день!
мой домен на ucoz: 5elem.ucoz.ru Если открыть robots.txt (http://5elem.ucoz.ru/robots.txt), то мы увидим: User-agent: * Disallow: / к хостингу прикреплен домен: http://www.profi-centr.ru/ Если открыть robots.txt (http://www.profi-centr.ru/robots.txt), то мы увидим: User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Host: profi-centr.ru/ Sitemap: http://www.profi-centr.ru/sitemap.xml Sitemap: http://www.profi-centr.ru/sitemap-forum.xml Sitemap: http://www.profi-centr.ru/sitemap-shop.xml Подскажите в чем проблема, как такое произошло и как это исправить? В данный момент моего сайта нету в выдаче.... мне нужно как можно скорее его вернуть. спасибо! Сайту более 2ух лет..... Тех. поддержка молчит. Не бойся когда один, бойся когда ноль...
|
|
joker7am,
Цитата Подскажите в чем проблема, как такое произошло и как это исправить? |
|
|
|
яндекс пишет, что profi-centr.ru является не главным зеркалом... у меня в настройках стоит перенаправление со стандартного домена на прикрепленный... что еще нужно сделать?
Добавлено (03 Фев 2013, 11:53:11) Не бойся когда один, бойся когда ноль...
|
|
joker7am,
Цитата года 2 назад, все было ок. а 1.02. робот яндекса выкинул из выдачи А вообще навигация у вас хлипкая ... создаётся впечатление что сайт мелкий, не смотря что Google показывает более 2 000 страниц, а как на них попасть одному аллаху известно .. |
|
Miss_Esq, хотя бы через раз вникайте в суть проблемы и анализируйте сайт. не знаете не пишите. это просто. ваш ответ - это минус. если пользователь вас начитался, то будет сидеть и ждать погоды от поисковика, а погоды не будет
joker7am, Цитата яндекс пишет, что profi-centr.ru является не главным зеркалом в файле роботс http://www.profi-centr.ru/robots.txt изменить директиву хост и прописать с www в яндексе настроить главное зеркало с www и ждать переиндексации. и не трогайте больше настройку приоритетного отображения в пу |
|
В течении какого времени после снятия карантина информация в роботе изменится и сайт будет проиндексирован????
|
|
Здравствуйте. Приключился такой случай. В вебмастере гугла увидел, что robots заблокировал 8к. страниц. В чём может быть причина? читал на
форумах, пишут что из-за этого robots, который неправильно составлен. У меня, как мне кажется, всё в норме. Но почему тогда заблокированы страницы? Второй вопрос. При тесте показателей сайта на cy-pr.com у меня он показал, что у гугла 65% всех страниц под фильтром. Почему? Контент на сайте уникальный, все описания писались в ручную, что и скопировано с других сайтов, то это только плеера с фильмами. Кстати, я сайт добавлял в поисковики во время карантина, что очень плохо, знаю. Может это быть причиной для фильтра? Что если удалить сайт с поисковиков и заново добавить? изменится что нибудь? Цитата User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /shop/order/ Disallow: /?ssid= Sitemap: http://сайт.ru/sitemap.xml Sitemap: http://сайт.ru/sitemap-forum.xml Sitemap: http://сайт.ru/sitemap-shop.xml |
|
Enigma3510, дайте примеры информации гугла по роботсу
Цитата В вебмастере гугла увидел, что robots заблокировал 8к |
|
Цитата дайте примеры информации гугла по роботсу Точнее? не совсем понял... Доступно только для пользователей |
|
Elooo, надо было дать примеры заблокированных страниц из этого количества, но если вы затираете адрес сайта, то будем считать, что все в порядке
|
|
Цитата (webanet) надо было дать примеры заблокированных страниц из этого количества Цитата (webanet) но если вы затираете адрес сайта, то будем считать, что все в порядке Добавлено (15 Фев 2013, 19:46:21) Цитата (Elooo) Как я узнаю какие страницы под фильтром? |
|
мой сайт http://softs.do.am/robots.txt
User-agent: * Disallow: / Что сделать Чтобы Стало Таким User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /shop/order/ Sitemap: http://softs.do.am/sitemap.xml Sitemap: http://softs.do.am/sitemap-forum.xml Sitemap: http://softs.do.am/sitemap-shop.xml |
| |||
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!