Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
ADMIN9900
Репутация: 0

Сообщение # 1321 | 11:23:05
Здравствуйте,Такая проблемка:
Стандартный robots.txt
User-agent: *Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=

Sitemap: http://anubis.do.am/sitemap.xml
Sitemap: http://anubis.do.am/sitemap-forum.xml
Sitemap: http://anubis.do.am/sitemap-shop.xmlПроплатил на прямую что бы снять карантин.
Проблема:
Доступ к URL заблокирован в файле robots.txt
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.Сведения об ошибках: ошибок: 0, предупреждений: 286.
Значение: http://anubis.do.am/ -1 сент. 2013 г.
Значение: http://anubis.do.am/index/0-2 -1 сент. 2013 г.
Значение: http://anubis.do.am/index/0-3 - -1 сент. 2013 г
Вопрос: что не так,подскажите пожалуйста,при выводе других сайтов такой проблемки не возникало(.
Яндекс тоже пишет на ошибки((

Добавлено (03 Сен 2013, 11:23:05)
---------------------------------------------
Что на форуме некому ответить стало??? wink
На вопрос: Почему Google пишет- предупреждений: 286

Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1322 | 12:25:40
ADMIN9900, Может запихнули сайт в поисковики до снятия карантина, скриншот проблемы от google, яндкеса..

maloir
Сообщений: 45
Репутация: 35

Сообщение # 1323 | 20:45:11
Здравствуйте, скажите пожалуйста, тут задал в поиск Гугл адрес своей стрницы и он мне выдал такое: Описание веб-страницы недоступно из-за ограничений в файле robots.txt прошел по ссылки у меня открылось вот это:

User-agent: *Disallow: /

Что это такое и как сделать что бы описание стало доступно? Спасибо

Сообщение отредактировал maloir - Вторник, 03 Сен 2013, 20:46:16
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1324 | 21:23:00
maloir, Новые сайты на карантине, карантин кончается через 30 дней со дня создания сайта ..

Sten9190
Репутация: 0

Сообщение # 1325 | 21:54:35
Здравствуйте! Хочу запретить индексацию сайта Яндексом.Закачал файл robots.txt с содержимым:

User-agent: YandexDisallow: / #Уже прошло около 3-х месяцев, но сайт все равно доступен в Яндексе!В чем причина?
is
Сообщений: 402
Репутация: 16
Уровень замечаний:

Сообщение # 1326 | 23:06:24
Sten9190, - ты не указал урл сайта, из профиля "на угад" в первом попавшемся у тебя сайте в ситемапах :
http://electroi.ucoz.ru/sitemap.xml
стоит дата последнего обновления "существующей" страницы:

<url>
<loc>
http://electroi.ucoz.ru/index/ssylki/0-167
</loc>
<lastmod>
2013-06-13T23:32:13+00:00
</lastmod>
<changefreq>
weekly
</changefreq>
</url>
<url>

и так далее...
в роботсе чтоб править удаление из индекса, я бы явно указал ссылку, хоть алов, хоть дисалов, с отдой стороны робот натыкаясь на нерабочую ссылку рано или поздно но быстрее выкенет ее из индекса, либо просто запрет и "ждать чуда" smile

promalp-forum.com
Sten9190
Репутация: 0

Сообщение # 1327 | 23:23:41
Речь идет о другом сайте h t t p : // e l l e c t r o i . u c o z . r u / , при проверке файла robots.txt на Яндекс.Вебмастер выпадает стандартный файл robots.txt, хотя я закачал свой файл. Как поменять стандартный файл robots.txt на свой?
Сообщение отредактировал Sten9190 - Вторник, 03 Сен 2013, 23:29:48
maloir
Сообщений: 45
Репутация: 35

Сообщение # 1328 | 15:02:32
Цитата (Miss_Esq)
maloir, Новые сайты на карантине, карантин кончается через 30 дней со дня создания сайта ..

У моего сайта карантин кончился уже давно!

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1329 | 15:13:31
maloir, где адрес сайта и прикреплен ли к нему домен?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1330 | 15:16:26
Sten9190, у вас и стоит стандартный http://ellectroi.ucoz.ru/robots.txt
дайте ссылку на свой залитый. в файловом менеджере посмотрите не два ли файла у вас. если два, то второй адрес неверен

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
maloir
Сообщений: 45
Репутация: 35

Сообщение # 1331 | 16:18:28
Цитата (webanet)
maloir, где адрес сайта и прикреплен ли к нему домен?
http://plyk.ru/

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1332 | 16:26:20
maloir, ну и какие у вас проблемы? нет запрета на индексацию http://plyk.ru/robots.txt
есть запрет только по старому домену http://plyk.ucoz.ru/robots.txt
но если вы не поставили индексации по обоим доменам, то так и должно быть. индексируется только новый домен и это правильно
сейчас уже индексацию по обоим доменам ставить не надо. вам надо добавить новый домен в поисковики и вебмастера яндекса и гугла и смотреть статистику по новому домену

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
ADMIN9900
Репутация: 0

Сообщение # 1333 | 19:32:02
Цитата (Miss_Esq)
Может запихнули сайт в поисковики до снятия карантина, скриншот проблемы от google, яндкеса..
Вы и правы!
Google опередил систему снятие карантина на пару минут)
при повторном скане все нормально стало,предупреждения были сняты.
Спасибо,извините за отнятое время.
С УВ.
Sten9190
Репутация: 0

Сообщение # 1334 | 19:52:19
Цитата (webanet)
Sten9190, у вас и стоит стандартный http://ellectroi.ucoz.ru/robots.txt дайте ссылку на свой залитый. в файловом менеджере посмотрите не два ли файла у вас. если два, то второй адрес неверен
в файловом менеджере только один файл который я залил http://ellectroi.ucoz.ru/robots.txt.txt а стандартный файл я не нашел! я заливал файл с именем robots.txt а в файловом менеджере он почему то отображается с двумя окончаниями robots.txt.txt , в чем причина?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1335 | 20:02:31
Sten9190, нажмите в файловом напротив своего файла на кнопочку переименования. вот так



и удалите лишнее
лишнее это .txt
Прикрепления: 1258776.jpg (6.3 Kb)

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Поиск:
Telegram
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!