Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Robots.txt
Модератор форума
Сообщение # 1 | 16:57:58
Shеriff
Сообщений: 3187
Репутация: 2662

Сообщение # 376 | 15:26:37
Quote (fllop)
Host: имя.ru

Sitemap: http://имя/sitemap.xml

Надеюсь, имя не забудете сменить на Ваш адрес сайта? biggrin

Профессиональный сервис опросов WebAsk
fllop
Сообщений: 72
Репутация: 45

Сообщение # 377 | 15:30:41
Quote (Shеriff)
Надеюсь, имя не забудете сменить на Ваш адрес сайта? biggrin

а что и там нужно что то писать? biggrin

Quote (webanet)
с /pda/ несогласна, а остальное ничего нигде не напутано

Не согласны с правильностью, или с тем что нужно закрывать?

Quote (webanet)
*-$ - это явно не средство от вхождения материалов в несколько категорий

Так а оно есть то средство это? Яндекс писимизирует сайт за дубли страниц.. В поиске страницы присутствуют, да вот только в выдаче не участвуют sad
Drinko
Сообщений: 909
Репутация: 773

Сообщение # 378 | 15:45:01
Quote (webanet)
с /pda/ несогласна

Поясняю на примере

http://sitename.ru/ (основной адрес)
http://sitename.ru/pda/ (дубль)
http://sitename.ru/pda/index/ (дубль)

Зачем нужны дубли?

Кроме того, зачем в выдаче нужны страницы облегченной версии вместо основной? А это будет - я сам помнится ужаснулся, что у меня в выдаче творилось, когда обнаружил подобное.

Сообщение отредактировал Drinko - Воскресенье, 24 Июн 2012, 15:46:11
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 379 | 16:05:53
Drinko,
http://www.google.ru/pda
http://www.yandex.ru/m/

тык сюда и смотрим телефончики

гугел делает телефончики. он очень хорошо различает пда и нормальную версию сайта

лучше активировать пда версию шаблонов и не мучиться с роботом

устройства и поисковые роботы все равно видят пда, но это не дубли.
не знаю что там у вас было, но у меня гугел раздевает сайт до последнего символа и никогда он не жаловался на дубли с пда
и таких дублей нет
можно насильно ему скормить именно на мобильную версию дать ссылку входа с пда на конце мобильному боту и все. и даже если он заходит по пда и дальше чудом жарит по простым ссылкам, то он их просто проходит и не индексирует как новые.

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
fllop
Сообщений: 72
Репутация: 45

Сообщение # 380 | 16:15:12
Ну да ладно вам с пда, скажите что делать с дублями страниц для Яндекса? wink
Drinko
Сообщений: 909
Репутация: 773

Сообщение # 381 | 17:01:08
fllop, каких именно? Примеры приведите.

fllop
Сообщений: 72
Репутация: 45

Сообщение # 382 | 17:12:04
http://имяru/load/smotret_boeviki/ljudi_v_chernom_3_2012_hdrip/ 11-1-0-139
http://имяru/load/smotret_komedii/ljudi_v_chernom_3_2012_hdrip/ 6-1-0-139
http://имяru/load/prikljuchenija_smotret/ljudi_v_chernom_3_2012_hdrip/ 9-1-0-139
http://имяru/load/fantastika_onlajn/ljudi_v_chernom_3_2012_hdrip/ 15-1-0-139
http://имяru/load/filmy_onlajn_2012/ljudi_v_chernom_3_2012_hdrip/ 18-1-0-139

Если ставить ЧПУ то всё равно цифры на конце разные, поэтому оставил с названием в урле. Раз у ж всё равно дубли sad А если не делать во все категории к которым относиться, тогда где же Юзабилити сайта wacko
Сообщение отредактировал fllop - Воскресенье, 24 Июн 2012, 17:14:07
Drinko
Сообщений: 909
Репутация: 773

Сообщение # 383 | 17:37:08
fllop, через robots никак не закроешь, но если есть свободные доп.поля, то можно через canonical http://support.google.com/webmasters/bin/answer.py?hl=ru&answer=139394

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 384 | 17:40:33
Drinko,
Quote
но если есть свободные доп.поля, то можно через canonical
не прокатит. физически - это один материал и одна страница на которую каноникал ставить не стоит вообще. или делать километровые условия на первую высшую категорию. а на урле высшей категории не показывать вообще
в любом случае красиво не сделать никак

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
fllop
Сообщений: 72
Репутация: 45

Сообщение # 385 | 17:48:03
Ппц. Я так понимаю что стоит забить либо на юзабилити, либо на Яндекс. Печалька... wink Придётся сайт по НЧ что ли продвигать, что бы не морочить им головы..
HandMade
Репутация: 0

Сообщение # 386 | 13:54:28
Здравствуйте...!
Начал создавать свой сайт... понял что надо ждать 30 дней для активации robots.txt
Вопрос: по истечении этого срока индексация по поисковикам (Яндекс, Гугл) произойдет автоматически или мне это надо будет делать самому?
Спасибо...!
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 387 | 14:10:32
HandMade, зарегистрировать в поисковиках после окончания карантина и процесс пойдёт намного быстрее ..

Kalgan4295
Сообщений: 14
Репутация: 0

Сообщение # 388 | 14:30:10
Здравствуйте! А если я закрою от индексации в роботе news/, то не будет индексировать все содержимое сайта или только архив материалов. У меня сайт на одном модуле новости сайтов, проблема в том что в Яндексе и В Гугле сумасшедшее количество дублей страниц, с мета тегами и и заголовками и в принципе индексирует отдельные страницы архива материала. Если я закрою, то это повлияет как то на все содержимое сайта? Проблема вообще жуть просто.
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 389 | 14:31:57
Kalgan4295, только архив материалов

Kalgan4295
Сообщений: 14
Репутация: 0

Сообщение # 390 | 14:36:11
То есть остальное содержимое он будет индексировать хорошо да как я понял? например вот такую страницу news/fehntezi/1-0-11. Простите за бестолковые вопросы просто делов не хочу натворить.
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Robots.txt (индексация сайта)
Поиск: