Модератор форума: Yuri_G |
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта) |
Robots.txt |
Нажмите на ссылку, чтобы перейти к ответу
Сообщение отредактировал webanet - Вторник, 27 Мар 2018, 20:08:42
|
Miss_Esq,
Это просто констатация факта переписки. webanet При установлении редиректа появляется два файла роботс: http://byttehnika-dp.at.ua/robots.txt http://posudavam.com.ua/robots.txt Первый, как я понял, создается автоматически и я его изменить не могу. Если я загружаю через файловый менеджер новый файл, изменяется второй файл, а его менять я не хочу. По рекомендации Яндекса при переезде сайта на новый домен можно: "Разместить директиву Host в файле robots.txt. Файл robots.txt с указанием нового главного зеркала должен быть доступен на всех зеркалах группы." Подробнее можно посмотреть здесь: http://help.yandex.ru/webmaster/?id=996567#996574 Поэтому, если uCoz обеспечит размещение директивы Host в файле robots.txt со старым именем сайта, это только улучшит индексацию страниц сайта по новому адресу Яндексом. Посуда и аксессуары Vinzer, Rondell, Granchio
Бытовая техника Vitek, Binatone, Viconte, Scarlett http://posudavam.com.ua/ |
Правильно ли составлен файл, или есть ошибки, подскажите.
Code User-agent: Yandex Allow: /wp-content/uploads/ Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /xmlrpc.php Disallow: /template.html Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /tag Disallow: /category Disallow: /archive Disallow: */trackback/ Disallow: */feed/ Disallow: */comments/ Disallow: /?feed= Disallow: /?s= Host: мой сайт User-agent:* Allow: /wp-content/uploads/ Disallow: /wp-login.php Disallow: /wp-register.php Disallow: /xmlrpc.php Disallow: /template.html Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: */comments Disallow: /tag Disallow: /category Disallow: /archive Disallow: */trackback/ Disallow: */feed/ Disallow: */comments/ Disallow: /?feed= Disallow: /?s= Sitemap: http://мой сайт/sitemap.xml |
|
vovik8761, для вордпресса, который вообще никак к юкозу не относится составлен практически правильно, хотя можно было бы убрать отдельное обращение к яндексу и оставить общее
а вот для юкоза скопированный на ворпрессе робот не подходит совсем. с таким роботом сайт или не будет индексироваться вовсе, или будет игнорироваться если ваш сайт на юкозе и вы не разбираетесь в роботе, то вам стоит оставить системный. он правильный. и никогда не копируйте чужие роботтексты для вставки на свой сайт |
Виталий98, мой robots.txt:
User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Sitemap: http://6pda.3dn.ru/sitemap.xml Sitemap: http://6pda.3dn.ru/sitemap-forum.xml Sitemap: http://6pda.3dn.ru/sitemap-shop.xml |
DIRID, у вас правильный робот. карантин снят. ничего трогать не надо
|
Добрый день. Подскажите пожалуйста как через robots.txt запретить индексирование некоторых страниц сайта. Если можно поподробнее, спасибо.
|
Если у меня нет форума и не будет.
Sitemap: http://имя сайта/sitemap-forum.xml - можно это удалить? (из robots.txt, а так же сам файл?) |
НеоМания, можете удалять из карты сайта. а так удалять сам файл бесполезно. он автоматом замещается системным. но если из робота удалить то будет нормально
|
|
|
| |||