Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Sitemap.xml карта сайта (Sitemap.xml карта сайта для поисковых роботов)
Sitemap.xml карта сайта
Модератор форума
Сообщение # 1 | 18:01:55
Sitemap.xml это карта сайта в формате XML предназначенная для поисковых роботов. В ней содержатся ссылки и метаданные (дата последнего изменения и частота изменения) о страницах подлежащих индексации. Карта сайта не является полной гарантией того, что все ссылки в ней находящиеся будут проиндексированы и попадут в поисковый индекс. Этот файл является вспомогательным, но не обязательным.
Карта сайта не должна содержать более 50000 URL.


Для сайтов системы uCoz не надо создавать карту сайта для поисковых роботов вручную с помощью локальных программ на компьютере или с помощью онлайн сервисов, система автоматически генерирует карты:
  • sitemap-site.xml - Редактор страниц
  • sitemap-blog.xml - Блог
  • sitemap-news.xml - Новости
  • sitemap-load.xml - Каталог файлов
  • sitemap-publ.xml - Каталог статей
  • sitemap-dir.xml - Каталог сайтов
  • sitemap-board.xml - Доска объявлений
  • sitemap-stuff.xml - Онлайн игры
  • sitemap-faq.xml - FAQ
  • sitemap-forum.xml - Форум
  • sitemap-photo.xml - Фотоальбом
  • sitemap-gb.xml - Гостевая книга
  • sitemap-shop.xml - Интернет-магазин
  • для самого сайта отдельно site.ru/sitemap.xml
  • Сгенерированные системой карты содержат 10000 URL
В файловом менеджере файлы sitemap появляются после первого обращения к любому из адресов карт сайта полученных в ПУ в модуле Поиск по сайту

Так же в файле robots.txt по окончании карантина появляются ссылки на карты сайта. До окончания карантина адреса карты сайта можно получить в панели управления - модуль поиск по сайту -


Важно! Карта сайта для гостевой книги sitemap-gb.xml генерируется лишь в том случае, если в Премиум настройках Seo-модуля не активна опция - "Запретить индексацию Гостевой книги поисковыми системами". Если опция активна, карта генерироваться не будет.

Что еще важно! Чтобы не генерировались пустые карты сайта автоматически, не нужно держать активными пустые модули в которых совсем нет материалов. Если не планируете наполнять модуль материалами, лучше удалите его совсем и лишняя пустая карта сайта не будет генерироваться.

Начиная с обновления от 13.09.2023 в карты сайтов модулей где создаются категории, URL категорий теперь так же добавляются в sitemap.

Важно! Если при добавлении карты сайта в вебмастер Google вам в колонке статус сообщается "Не получено", это не проблема с стороны uCoz, это некорректная работа именно Google Webmaster. Обычно чтобы эта ошибка устранилась, достаточно чтобы прошло несколько суток, иногда бывает и несколько часов достаточно.

Стоит усвоить основное понимание по данной ошибке, если карта сайта по прямой ссылке у вас доступна, это уже хорошо и ошибок с стороны uCoz нет. То что гугл сообщает вам об ошибке, это конкретно ошибки вебмастера и скорость обработки sitemap с стороны Google.


До окончания карантина адреса sitemap не надо передавать поисковым системам через панели вебмастера
После окончания карантина можно добавить карты в панель вебматера Яндекса //u.to/32kB
и в инструменты для вебмастеров Google


Некоторые проблемы и причины возникновения проблем


Проблема: Ошибки в вебмастере Яндекса или Google
Некорректный URL (не соответствует местоположению файла Sitemap) или Пути не совпадают или Неизвестный тип ошибки (ERR_HOST_NOT_CONFIRM)

Причины: Вы неправильно указали адрес сайта. Ваш сайт настроен на отображение без www, а в вебмастер вы добавили сайт с www . Или ошибка в написании адреса карты сайта в robots.txt где вы опять же неправильно указали адрес с www или без. Читать подробней о главном зеркале сайта


Проблема: Ошибки в вебмастере Яндекса "Неверный формат документа" В страницах с ошибкой в списке URL и sitemap.xml
Причины:
1)Такую ошибку Яндекс обычно выдает, если находит ссылку на адрес карты сайта в коде страницы. Робот не принимает карту сайта в формате xml со страниц. Это ещё раз говорит о том, что прописывать адреса sitemap.xml в код страниц не стоит. Индексацию это точно не улучшит, а ошибки иногда будете получать

2) Вы закачали свою карту сайта, или стандартную, но исправленную вами на компьютере. Такую ошибку робот выдает при сохранении в неправильной кодировке (должна быть utf-8) или у документа неправильное форматирование. Это значит, что создавать свою карту сайта не надо, достаточно системной. А так же совершенно категорически не стоит заниматься самостоятельными правками sitemap.xml


Проблема: Ошибка в вебмастере Google
Файл не содержит URL
Причина: Такое обычно бывает, если робот Google на новом сайте после окончания карантина в robots.txt находит ссылку на карту сайта форума например, а модуль форума запущен, но пустой. То есть нет форумов, нет тем, нет сообщений
Поэтому пока сайт на карантине старайтесь наполнять информацией все запущенные модули


Проблема: В списке URL карты сайта отсутствуют ссылки на страницы залитые через файловый менеджер
Причина: Страницы залитые в файловый менеджер не попадают в карту сайта, так как не являются системными или страницами модулей. Отсутствие URL на залитые страницы в карте сайта не влияют на индексацию подобных страниц. Для индексации вам надо вывести ссылки на такие страницы на сайт


Проблема: Ошибки сканирования - В файле sitemap - Вебмастер Google (сайт давно снят с карантина)
Причина: Добавленная страница через редактор страниц или любые другие страницы прописаны запретом в файле robots.txt. Проверьте правильно ли составлен у вас robots.txt
Если вы сами прописывали страницу/ы в роботс, то ничего предпринимать не надо - Гугл выдает техническую информацию


Проблема: Количество отправленных (загруженных роботом) и проиндексированных URL не совпадает.Проиндексированных меньше
Причина: Карта сайта не является залогом того, что все URL на вашем сайте будут проиндексированы и попадут в поисковый индекс. Нормальной считается ситуация, когда проиндексировано около 80% загруженных url


Полезная информация


Карта сайта обновляется автоматически раз в 2-4 дня, при условии, что на сайт были добавлены новые материалы.

Если надо по каким либо причинам обновить карту не дожидаясь автоматического обновления, то заходим в файловый менеджер и удаляем карту сайта (карту форума или карту интернет-магазина). Удаленная карта тут же заменится новой, но уже с обновленной информацией. Для первого вызова удаленной карты надо пройти по её адресу, например: site.ru/sitemap.xml

Никогда не выводите ссылки на карту сайта в формате xml на страницы сайта. Индексацию это точно не улучшит, как и степень доверия к вашему сайту у поисковой машины. Роботы имеют доступ к карте через корневую директорию файлового менеджера так же по умолчанию адреса прописаны в robots.txt и не нужно дублировать адрес на страницах.

Не пытайтесь генерировать sitemap с помощью различных программ или всяких сервисов. Кроме блокировки вашего ip и различных вы ничего не получите. Системной карты вполне достаточно, она автоматически обновляется. А залитую карту вам придется каждый раз обновлять вручную. А если учесть настройки запросов во избежании блокировки ip, то это получается бесконечный никчемный труд

Не пытайтесь скачивать карту сайта, вручную делать изменения и закачивать её снова. Любая ошибка с вашей стороны и вы получите массу ошибок индексации или проблем с самой картой сайта. Лучше ничего не трогать

При добавлении карты сайта в форму вебмастера Яндекса нужно добавлять полный адрес карты. Например: //u.to/4AwQ
При добавлении карты в форму вебмастра Google нужно добавлять только sitemap.xml адрес сайта с закрывающим слешем Google подставляет сам.
Прикрепления: 7551743.jpg (2.2 Kb)
Diana7970
Сообщений: 46
Репутация: 0

Сообщение # 91 | 09:13:29
webanet,
Quote
зачем вы держите карту магазина?

Так я её сама нарисовала что ли? Она там появляется даже если её удалить - и торчит на каждом сайте. Вроде не мешает и не мешала никогда.
alena2928
Сообщений: 10
Репутация: 6

Сообщение # 92 | 20:08:01
Вопрос:Я закрыла от индексации некоторые модули на своем сайте, дабы уйти от дублированного контента,но почему они появляются в карте сайта которую генерирует сам UCOZ,не зависимо от того закрыта страница robots.txt она все равно будет попадать в карту сайта? Так ли критично будет если я закачаю свою карту сайта подготовленную.У меня контент не настолько активно обновляется и мне как раз и не надо чтоб все страницы моего сайта попадали в индекс.

Заранее спасибо за ответ smile
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 93 | 23:29:10
alena2928,
Quote
но почему они появляются в карте сайта которую генерирует сам UCOZ,не зависимо от того закрыта страница robots.txt
так и есть. роботтекст не влияет на содержание карты сайта
Quote
Так ли критично будет если я закачаю свою карту сайта подготовленную.
это не критично, если вы точно знаете как это делать. в остальных случаях критично
Quote
и мне как раз и не надо чтоб все страницы моего сайта попадали в индекс.
содержание карты сайта не может влиять на непопадание страниц в индекс

но если есть закрытые страницы через роботтекст, а в карте сайта они присуствуют, то вы будете получать предупреждения в вебмастерах
от гугла наглухо можно закрыть на индексирование только через настройки параметров урл. если не знаете как настраивать, то лучше не делать

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
alena2928
Сообщений: 10
Репутация: 6

Сообщение # 94 | 00:09:19
Cпасибо за содержательный ответ,а подскажите как правильно загружать свою карту сайта? Чтобы не наделать бед на свои ,,,,,,цать лет biggrin

Добавлено (11-Май-2012, 00:09:19)
---------------------------------------------

Quote (webanet)
от гугла наглухо можно закрыть на индексирование только через настройки параметров урл
.

Я правильно вас поняла,что даже если я закрыла от индексации некоторые страницы в robots.txt это не дает гарантии что они окажутся в индексе гугла или яндекса?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 95 | 00:16:22
alena2928,
Quote
Я правильно вас поняла,что даже если я закрыла от индексации некоторые страницы в robots.txt это не дает гарантии что они окажутся в индексе гугла или яндекса?
100% гарантии нет

Quote
подскажите как правильно загружать свою карту сайта?
вам этого не стоит делать

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Учитель3243
Сообщений: 1
Репутация: 0

Сообщение # 96 | 16:52:16
Как добавить карту сайта?
вот адрес сайта http://www.vsedlyainformatikov.net cry
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 97 | 16:55:26
Учитель3243, посмотрите вот сюда http://www.vsedlyainformatikov.net/robots.txt это ваш роботс. карта сайта уже есть (читайте первое сообщение темы)
или объясняйте куда вы собрались её добавлять

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Noqleatin
Сообщений: 8
Репутация: 0

Сообщение # 98 | 03:03:32
Я добавил sitemap в яндекс. Он их "обрабатывает" уже пол месяца.
У меня получается, что страницы сайта */forum ; */publ; */news в индексе, а */load - нет, т.к. он в sitemap прописан. Сколько Яндекс обрабатывает sitemap? Стоит ли написать в Тех поддержку?
VictorP
Сообщений: 34
Репутация: 0

Сообщение # 99 | 22:25:57
Сегодня захожу в вебмастер и вижу вот такую картину,а до этого все было нормально.

Что бы это значило,и что мне надо делать?
Прикрепления: 8257674.jpg (82.4 Kb)
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 100 | 22:29:22
VictorP, попробуйте добавить карты сайта. адрес сайта есть? крепился к нему домен или нет?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
VictorP
Сообщений: 34
Репутация: 0

Сообщение # 101 | 22:45:40
Адрес сайта:http://antialko.ucoz.ru
Домен не крепил,но сделал перенаправление с домена:http://копытень.рф
на страницу:http://antialko.ucoz.ru/index/0-20
Сообщение отредактировал VictorP - Пятница, 17 Авг 2012, 22:46:13
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 102 | 22:57:47
VictorP, давно перенаправление сделали?
карту сайта яндексу снова пробовали прпоисывать?

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
VictorP
Сообщений: 34
Репутация: 0

Сообщение # 103 | 23:02:49
Перенаправление сделал 2 августа с.г. карту снова не прописывал.
uzbaby
Сообщений: 22
Репутация: 1

Сообщение # 104 | 11:06:41
У меня модуль ГОСТЕВАЯ КНИГА неактивный. Но при сканировании гуглом он выдает ошибку страницы www.moysayt.uz/gb

как это испавить?
Drinko
Сообщений: 909
Репутация: 773

Сообщение # 105 | 11:38:56
uzbaby, прописать директиву

Code
Disallow: /gb/


в robots.txt

Сообщество uCoz » Вебмастеру » Раскрутка сайта » Sitemap.xml карта сайта (Sitemap.xml карта сайта для поисковых роботов)
Поиск: