Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1051 | 08:20:45
Ya_mandarin, Ждать окончания карантина, с момента создания сайта это - 30 дней, или проплатить любую платную услугу на сумму более 3$ USA - карантин будет снят ...

Kmjyz, Удалить из Файлового менеджера файл - robots.txt, в вашем файле написан чистый бред:

# robots.txt generated at http://www.mcanerin.com
User-agent: *
Disallow:
Disallow: /cgi-bin/
Sitemap: http://freepayment.ucoz.ru/sitemap.xml

Сообщение отредактировал Miss_Esq - Четверг, 04 Апр 2013, 08:21:11
Deagle_36
Сообщений: 32
Репутация: -1

Сообщение # 1052 | 13:14:44
User-agent: *Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=

Sitemap: мой сайт/sitemap.xml
Sitemap: мой сайт/sitemap-forum.xml
Sitemap: мой сайт/sitemap-shop.xml

скажите пожалуйста вот у меня так все стоит и мне интересно будут индексироваться странички publ и load ?
dimaxx
Репутация: 0

Сообщение # 1053 | 13:42:30
Модератор форума, добрый день!
сайт: http://leather-shop.kiev.ua
создан: [02.03.2013, 11:40]
не индексируется, хотя вроде как время карантина прошло (30 дней с 02/03/13)
залил в корневой каталог файл robots.txt с содержанием:
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=

Sitemap: http://leather-shop.kiev.ua/sitemap.xml
Sitemap: http://leather-shop.kiev.ua/sitemap-forum.xml
Sitemap: http://leather-shop.kiev.ua/sitemap-shop.xml

но при переходе по адресу: http://leather-shop.kiev.ua/robots.txt открывается файл с содержанием:
User-Agent: *
Disallow: / /
Disallow: / стат /
Disallow: / индекса / 1
Disallow: / индекса / 2
Disallow: / индекса / 3
Disallow: / индекса / 5
Disallow: / индекса / 7
Disallow: / индекса / 8
Disallow: / индекса / 9
Disallow: / панель /
Disallow: / admin /
Disallow: / безопасный /
Disallow: / информера /
Disallow: / mchat
Disallow: / поиск
Disallow: / магазин / заказ /
Disallow: / SSID =

Карта сайта: http://leather-shop.kiev.ua/sitemap.xml
Карта сайта: http://leather-shop.kiev.ua/sitemap-forum.xml
Карта сайта: http://leather-shop.kiev.ua/sitemap-shop.xml

КАК-БУДТО САЙТ НА КАРАНТИНЕ
В ЧЕМ ПРОБЛЕМА????
ПОМОГИТЕ ПОЖАЛУЙСТА.......
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1054 | 13:59:55
Deagle_36, будут

dimaxx, на данный момент ваш роботс правильный и выглядит нормально http://leather-shop.kiev.ua/robots.txt ваша задача оставить его в покое сайт не под карантином. наполняйте его материалами

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
dimaxx
Репутация: 0

Сообщение # 1055 | 14:53:34
а нормально то, что Яндекс на данный момент пишет - "Сайт не проиндексирован." Хотя я его добавлял в поисковую систему Яндекса согласно инструкций.
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1056 | 15:01:11
dimaxx, нормально, особенно если он попал в поиск когда был на карантине. ждем 2 недели

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
ksenia6698
Репутация: 0

Сообщение # 1057 | 11:47:41
URL restricted by robots.txt ошибка при продвижении сайта в google
Drinko
Сообщений: 909
Репутация: 773

Сообщение # 1058 | 16:30:14
ziby
Сообщений: 1
Репутация: 2

Сообщение # 1059 | 19:53:16
Здравствуйте! В robots.txt обнаружил ссылку на сайтмэп чужого сайта. При этом сайт почти полностью вылетел из поисковиков. В чем, по вашему, может быть причина?
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1060 | 20:24:25
ziby, Адрес у сайта есть ???

ziby
Сообщений: 1
Репутация: 2

Сообщение # 1061 | 20:48:56
Цитата (Miss_Esq)
ziby, Адрес у сайта есть ???

Мой сайт http://reost.at.ua/
robots.txt выглядел так
User-agent: *
Allow: /
Disallow: /panel

Sitemap: http://in-green.com.ua/google_sitemap.php
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 1062 | 21:29:44
ziby, Сейчас то нормальный а откуда появилось такое чудо ..... wacko

ziby
Сообщений: 1
Репутация: 2

Сообщение # 1063 | 21:36:49
Другой версии, как взлом конкурентами, на ум не приходит evil
LuckyMan8450
Сообщений: 1
Репутация: 2

Сообщение # 1064 | 03:51:39
Добрый день.
С гугла упал трафик. в вебмастер тул есть типа сообщения под вот этим
Файл robots.txt Заблокированные URL Загружено Статус
http://avto-torg.com.ua/robots.txt 1 303 22 апр. 2013 г. 200 (Успешно)

Google tried to crawl these URLs in the last 90 days, but was blocked by robots.txt.

Как быть?
Свадьба3595
Репутация: 0

Сообщение # 1065 | 15:25:32
Как найти этот - robots.txt ?

Добавлено (04 Май 2013, 15:25:32)
---------------------------------------------
Как найти этот - robots.txt ?

Поиск:
Telegram
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!