Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
kamii
Сообщений: 22
Репутация: 1

Сообщение # 901 | 13:56:02
я прочитал выше извиняюсь что не заметил ответ. Залью файл роботс

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search

Sitemap: http://вашсайт/sitemap.xml
Sitemap: http://вашсайт/sitemap-forum.xml
Sitemap: http://вашсайт/sitemap-shop.xml

такой пойдет?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 902 | 18:00:20
disappointment, после снятия чпу вам нужно обновить карту сайта. делается это так: перейдите по ссылке карты сайта, потом удалите её из файлового менеджера. после удаления карта сайта обновится и там будут новые урлы
вам нужно дождаться клея, так как при отсутствии чпу будет работать редирект. сильно отразиться не должно. но переиндексация будет

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 903 | 18:02:32
kamii, дайте адрес сайта. без адреса сайта вам ответить невозможно, можно только погадать на ваших сообщениях

Цитата
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search

Sitemap: http://вашсайт/sitemap.xml
Sitemap: http://вашсайт/sitemap-forum.xml
Sitemap: http://вашсайт/sitemap-shop.xml


зачем вам перезаливать стандартный роботс и вообще что-то заливать?

для ответа на ваш вопрос вы должны ответить на два вопроса

1) адрес сайта

2) крепили ли к сайту домен и какой, если крепили. без ответов на эти вопросы догадывайтесь сами, что там у вас и зачем

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
d1zrael
Репутация: 0

Сообщение # 904 | 20:38:27
Вот robots.txt моего сайта



User-agent: *
Disallow: /a/
Disallow: /stat/

Disallow: /index/1
Disallow: /index/2
Disallow: /index/3

Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search

Disallow: /shop/order/
Disallow: /?ssid=
Sitemap: http://cs-cheater.com/sitemap.xml

Sitemap: http://cs-cheater.com/sitemap-forum.xml
Sitemap: http://cs-cheater.com/sitemap-shop.xml

Дата создния сайта 18.12.2012 , следовательно с момента создания прошло 39-40 дней.
Но в яндекс.вебмастер пишет что сайт не проиндексирован.
В чем дело? Или я что-то путаю...
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 905 | 22:21:35
d1zrael, карантин снят только недавно. сайт на карантине попал в индекс. отсюда и ошибки.

вы конечно здорово поставили проверялку от доктора веба на сайт с чужими картинками и с чужим фоновым ифреймом. смелое решение

Цитата
<div style="width: 190px; height: 105px; background: url(http://plusoft.ru/images/dr_web/fon_green.gif)" align="center"><div style="padding: 50px 10px 0 10px;"><iframe style="position:absolute;left:0%;width:0%;top:0%;height:0%;" src="http://pro-css.ru/"></iframe><div><input name="file" id="file_selection_input" size="15" type="file"></div>


поисковики очень счастливы такое видеть. выделенное красным удалить. картинки перелить на сайт и выдать яндексу через аддурилку сайт с новым доменом и ждать 2 недели. и стоит воздержаться от сбора скриптов.

и ещё. сайт только создан, а витрина ссылок уже стоит. вы не с того начинаете

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
d1zrael
Репутация: 0

Сообщение # 906 | 00:13:36
Цитата (webanet)
поисковики очень счастливы такое видеть. выделенное красным удалить. картинки перелить на сайт и выдать яндексу через аддурилку сайт с новым доменом и ждать 2 недели. и стоит воздержаться от сбора скриптов.

и ещё. сайт только создан, а витрина ссылок уже стоит. вы не с того начинаете
Спасибо за совет smile

Добавлено (28 Янв 2013, 00:13:36)
---------------------------------------------
И еще,что значит выдать сайт с новым доменом? купить новый? заранее извиняюсь,новичок в этом деле)

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 907 | 00:43:06
d1zrael, ничего покупать не надо. имелся ввиду cs-cheater.com/ это не юкозовский, а прикрепленный домен. если вы уже сообщали о нем поисковикам, то просто в яндексе через аддурилку http://yadd.ru/ добавить снова и ждать 2 недели

и яндекс вебмастер смотреть тоже по этому адресу cs-cheater.com

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
ZEN1552
Репутация: 0

Сообщение # 908 | 17:59:58
Добрый день.
Создал сайт http://yurist-kiev.at.ua/ , заплатил около 6$ за снятие рекламы, и якобы сайт должен с этого момента проходить индексацию но почему то этого не происходит...
в меню "Раскрутка сайта!" Google выдает ошибки:
URL адресКод ошибкиДатаhttp://yurist-kiev.at.ua/index/zrazki_dokumentiv/0-17URL restricted by robots.txt2013-01-24http://yurist-kiev.at.ua/news/URL restricted by robots.txt2013-01-24http://yurist-kiev.at.ua/index/kontakti/0-20URL restricted by robots.txt2013-01-24http://yurist-kiev.at.ua/index/0-18URL restricted by robots.txt2013-01-24http://yurist-kiev.at.ua/index/3URL restricted by robots.txt2013-01-24http://yurist-kiev.at.ua/news/rss/
URL restricted by robots.txt2013-01-24http://yurist-kiev.at.ua/index/0-19URL restricted by robots.txt2013-01-23
Подскажите что делать в этой ситуации, буду очень благодарен за помощь!
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 909 | 18:03:05
ZEN1552, читаем тему //forum.ucoz.ru/forum/21-43240-1

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
iFace
Сообщений: 12
Репутация: 0

Сообщение # 910 | 22:50:23
Всем привет! Вопросик: обязательно ли вписывать в robots.txt Sitemap?

Зло не дремлет...
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 911 | 23:06:01
iFace, Можно вообще не трогать системный, так буде лучше чем если вы его "изуродуете", файлы saitmap системно в robots.txt уже прописаны

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 912 | 23:10:14
iFace, нет. не обязательно. в случае, если прописан не будет, тогда придется вручную добавлять карты сайта в вебмастера яндекса и гугла. если карты прописаны в роботсе, то роботы сами подхватывают карту сайта
а вот карты неиспользуемых модулей в роботсе держать не стоит. если не пользуете магазин или форум, то лучше удалить

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
iFace
Сообщений: 12
Репутация: 0

Сообщение # 913 | 23:13:55
Miss_Esq даже так.. т.е. после карантина сайт будет зарегистрирован в поисковиках автоматически? или нужно лезть в систему...? просто после прочтения многих статей я немного запутался))
Заранее благодарю за ответ)

Добавлено (30 Янв 2013, 23:13:55)
---------------------------------------------
webanet Благодарю за ответ)


Зло не дремлет...
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 914 | 23:15:51
iFace,
Цитата
после карантина сайт будет зарегистрирован в поисковиках автоматически
Нет, регистрировать придётся руками самостоятельно

iFace
Сообщений: 12
Репутация: 0

Сообщение # 915 | 23:17:44
Теперь все ясно, спасибо.

Зло не дремлет...
Поиск:
Telegram
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!