Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
vladlenpanda
Сообщений: 15
Репутация: 0

Сообщение # 1936 | 19:24:34
мой сайт http://www.game-wtorrent.ru/ robots.txt помогите сделать правильный robots.txt файл я в robots.txt врубиться толком не могу я вк http://vk.com/id247988072
$Vladimir$
Сообщений: 7465
Репутация: 1053

Сообщение # 1937 | 19:41:32
vladlenpanda, у вас стоит стандартный robots . Стандартный robots позволяет наиболее оптимально индексировать сайт.
DIV4087
Сообщений: 10
Репутация: 0

Сообщение # 1938 | 19:24:32
Подскажите, как прописать в роботсе, чтобы такие страницы в каталоге файлов /load/pr/pr1/1-1, /load/pr/pr1/1-2, /load/pr/pr1/1-3 и т.д. индексировались, а такие /load/pr/pr1/1-1-1, /load/pr/pr1/1-2-1, /load/pr/pr1/1-2-2 и т. д не индексировались?
Сообщение отредактировал DIV4087 - Пятница, 14 Авг 2015, 19:25:17
MercadoR
Сообщений: 116
Репутация: 0

Сообщение # 1939 | 20:13:36
Как сделать что роботс позволял индексировать только (каталог файлов) ?

Время - удивительная штука. Его так мало, когда опаздываешь и так много, когда ждешь.

Фильмы онлайн - kinogoll.ru
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1940 | 21:01:55
MercadoR, исправьте сначала адрес карты сайта в роботсе Sitemap: http://kinogoll.ru//sitemap.xml
у вас на сайте только каталог файлов и есть и пара индексных страниц. лучше перечислите какие страницы нежелательно индексировать и их можно закрыть для индексации даже более надежно чем роботс

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Egor4596
Сообщений: 3
Репутация: 0

Сообщение # 1941 | 21:23:55
Здравствуйте, уважаемые!
В Robots.txt закрыт от индексации "поиск". Это практически везде считается правилом Почему же Вебмастер Яндекса считает это ошибкой?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1942 | 22:14:34
Egor4596, подробнее об ошибке. опишите или скриншот ошибки сделайте

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Egor4596
Сообщений: 3
Репутация: 0

Сообщение # 1943 | 22:54:34
webanet , прошу извинить: не в той строке раздела "Исключенные страницы" посмотрел - вместо "Страницы запрещены к индексированию вебмастером или не существуют" посмотрел строку "Ошибки на стороне сервера или сайта". Поторопился, но всё же 400 исключенных страниц жалко.
Благодарю за быструю реакцию. Вопрос можно удалить.
Сообщение отредактировал Egor4596 - Понедельник, 14 Сен 2015, 23:17:18
alexya25
Репутация: 0

Сообщение # 1944 | 08:47:43
Сайт был месяц на карантине. Плюнула купила минимальный пакет - думаю наконец то откроют robots.txt
Открыли на 10 минут и опять закрыт!!! Что делать???

http://promokodflip.ucoz.net/robots.txt
_CrySiS_
Сообщений: 464
Репутация: 38

Сообщение # 1945 | 12:49:35
ascon-v12
Репутация: 0

Сообщение # 1946 | 19:08:30
Привет всем))) у меня уже прошел как месяц (30/08/2015) от создания сайта eliseev.at.ua а сайт до сих пор находится в карантине. Подскажите что не так? Когда он снимется с карантина? Так же пишет что сайт не проиндексирован.
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1947 | 19:28:40
ascon-v12, проверьте в файловом менеджере наличие файла robots.txt если он есть удалите. если нету, то прочитайте это //forum.ucoz.ru/forum/21-38597-1

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
velo-34
Репутация: 0

Сообщение # 1948 | 19:32:44
21.10 Я уже обращалась с проблемой, что при попытке добавить сайт в яндекс, вышло сообщение "3.10.наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt, поэтому сайт в поиске не участвует.". В панели управления сайт разрешен к индексации. Гуглом проиндексировался. В чем проблема и как исправить? Адрес сайта http://deti-psy.ruМне ответили, что это старые данные и нужно дождаться новой индексации. Но сегодня сообщение обновилось, что "26.10.2015 наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt, поэтому сайт в поиске не участвует. " Что происходит? Что делать?

Прилагаю скрины экрана
Прикрепления: 0678194.png (111.2 Kb) · 4809441.png (107.6 Kb)
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 1949 | 19:38:10
velo-34,
Цитата
Что происходит? Что делать?
не дублировать везде. ответ тут //www.ucoz.ru/qa/index.php/53687/

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
baron69
Сообщений: 36
Репутация: 32

Сообщение # 1950 | 21:17:19
Может вы забыли?
Allow: /
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: