Модератор форума: Yuri_G  
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
mak5imov
Репутация: 0

Сообщение # 646 | 16:21:49
Quote
mak5imov, где адрес вашего сайта?
http://agenter.ru
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 647 | 16:28:30
mak5imov, у вас все нормально. блокировки нет больше. смотрите на свой роботс http://agenter.ru/robots.txt

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
mak5imov
Репутация: 0

Сообщение # 648 | 16:34:21
webanet, смотрю... И вижу

Code
User-agent: *

Добавлено (14-Ноя-2012, 16:34:21)
---------------------------------------------

Quote
webanet, смотрю... И вижу 
User-agent: *
Не вставился весь код. В общем там Ваш стандартный для карантина
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 649 | 16:37:58
mak5imov,
Quote
User-agent: *
это стандартное обращение в поисковым роботам. а дальше идут директивы. вижу вы изменили роботс. удалите свой, он заменится системным и больше ничего трогать не нужно. с системным будет правильная индексация.

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
mak5imov
Репутация: 0

Сообщение # 650 | 16:40:58
webanet, удалил. Заменился тем, что запрещает индексацию всего сайта
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 651 | 16:43:15
mak5imov, роботс уже заменился у вас и выглядит так

Code
User-agent: *Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: http://agenter.ru/sitemap.xml
Sitemap: http://agenter.ru/sitemap-forum.xml
Sitemap: http://agenter.ru/sitemap-shop.xml
далее читайте это сообщение //forum.ucoz.ru/forum/21-13447-341-16-1144156317 синеньким выделен роботс без карантина. красненьким выделен роботс на карантине.
ваш сайт не закрыт от индексации. в роботс прописаны технические страницы, которые не должны индексироваться

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Rus96
Сообщений: 14
Репутация: 0

Сообщение # 652 | 19:56:01
Моему сайту еще нет месяца, но по моему он вышел с карантина... Как узнать точно?

Добавлено (14-Ноя-2012, 19:56:01)
---------------------------------------------
Еще один - я добавил в поисковики сайт до снятия карантина... Неужели надо заново туда его добавлять??? Он вроде и так индексируется... Но у меня в Google не то название отображается...

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 653 | 23:08:10
Rus96,
Quote
Моему сайту еще нет месяца, но по моему он вышел с карантина... Как узнать точно?

дать ссылку на сайт или смотреть файл роботс http://ваш сайт/robots.txt

Quote
Еще один - я добавил в поисковики сайт до снятия карантина... Неужели надо заново туда его добавлять??? Он вроде и так индексируется... Но у
меня в Google не то название отображается.

дайте адрес сайта

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Rus96
Сообщений: 14
Репутация: 0

Сообщение # 654 | 00:21:18
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 655 | 00:54:41
Rus96, карантин снят

Quote
Еще один - я добавил в поисковики сайт до снятия карантина... Неужели надо заново туда его добавлять??? Он вроде и так индексируется... Но у
меня в Google не то название отображается...

сайт не проиндексирован. гугл получил ссылку вместе с запретом. как выйти из этого читайте тут //forum.ucoz.ru/forum/21-43240-1

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
RybakowS
Сообщений: 4
Репутация: 0

Сообщение # 656 | 19:09:44
Здравствуйте. я зарегистрировал домен, потом оплатил 3$ что б сняли фильтр на индексирование. Потом я добавил сайт уже в Яндекс иГугл на индексацию. Но гугл пишет "Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt." "Количество проблем 12" Яндекс тоже пишет что индексация заблокирована в файле robots. Будут ли поисковики индексировать мой сайт??? http://igrotrade.net/ Вот мой robots:

User-agent: Mediapartners-GoogleDisallow:User-agent: *Disallow: /a/Disallow: /stat/Disallow: /index/1Disallow: /index/2Disallow: /index/3Disallow: /index/5Disallow: /index/7Disallow: /index/8Disallow: /index/9Disallow: /panel/Disallow: /admin/Disallow: /secure/Disallow: /informer/Disallow: /mchatDisallow: /searchDisallow: /shop/order/Sitemap: http://igrotrade.net/sitemap.xmlSitemap: http://igrotrade.net/sitemap-forum.xmlSitemap: http://igrotrade.net/sitemap-shop.xml
Rus96
Сообщений: 14
Репутация: 0

Сообщение # 657 | 00:25:59
Quote
сайт не проиндексирован. гугл получил ссылку вместе с запретом.
Сделал, но в поиске все осталось по прежнему... Надо пару дней подождать?
Администратор5864
Сообщений: 14
Репутация: 7

Сообщение # 658 | 13:04:53
Скажите почему Яндекс робот не меняет старые ссылки на новые? То есть у меня индексация прошла, все в порядке, но названия в тегах <title></title> остается старым оно не меняется в Яндексе! И ссылок только меньше стало, старый материал исчез, а новый не появляется. Последней визит робота был вчера. А изменения не сайте произошли неделю назад.
Сообщение отредактировал Администратор5864 - Пятница, 16 Ноя 2012, 14:22:39
Amati5210
Сообщений: 125
Репутация: 16

Сообщение # 659 | 13:36:31
Уж больно вы торопитесь, уважаемый. В Гугл вообще смена позиции в результате выдачи может до 2-ух недель занимать. Это не вкл-выкл. Вообще торопиться в этих вопросах не стоит. Всё будет, но не сразу.

Мой сайт РемДомТех
_aleksey_
Маркетолог
Сообщений: 190
Репутация: 64

Сообщение # 660 | 13:51:11
В Гугле позиции меняются быстрее чем в Яндексе, но в любом случае нужно время чтобы отработались правки.

Мне можно задать любые вопросы по продвижению, внутренней оптимизации uCoz-сайтов и SEO-модулю.
Поиск:
Telegram
Будьте в курсе всех обновлений: подпишитесь на наш официальный Telegram-канал uCoz и задавайте вопросы в чате сообщества!