Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Sitemap.xml карта сайта (Sitemap.xml карта сайта для поисковых роботов)
Sitemap.xml карта сайта
Модератор форума
Сообщение # 1 | 18:01:55
Sitemap.xml это карта сайта в формате XML предназначенная для поисковых роботов. В ней содержатся ссылки и метаданные (дата последнего изменения и частота изменения) о страницах подлежащих индексации. Карта сайта не является полной гарантией того, что все ссылки в ней находящиеся будут проиндексированы и попадут в поисковый индекс. Этот файл является вспомогательным, но не обязательным.
Карта сайта не должна содержать более 50000 URL.


Для сайтов системы uCoz не надо создавать карту сайта для поисковых роботов вручную с помощью локальных программ на компьютере или с помощью онлайн сервисов, система автоматически генерирует карты:
  • sitemap-site.xml - Редактор страниц
  • sitemap-blog.xml - Блог
  • sitemap-news.xml - Новости
  • sitemap-load.xml - Каталог файлов
  • sitemap-publ.xml - Каталог статей
  • sitemap-dir.xml - Каталог сайтов
  • sitemap-board.xml - Доска объявлений
  • sitemap-stuff.xml - Онлайн игры
  • sitemap-faq.xml - FAQ
  • sitemap-forum.xml - Форум
  • sitemap-photo.xml - Фотоальбом
  • sitemap-gb.xml - Гостевая книга
  • sitemap-shop.xml - Интернет-магазин
  • для самого сайта отдельно site.ru/sitemap.xml
  • Сгенерированные системой карты содержат 10000 URL
В файловом менеджере файлы sitemap появляются после первого обращения к любому из адресов карт сайта полученных в ПУ в модуле Поиск по сайту

Так же в файле robots.txt по окончании карантина появляются ссылки на карты сайта. До окончания карантина адреса карты сайта можно получить в панели управления - модуль поиск по сайту -


Важно! Карта сайта для гостевой книги sitemap-gb.xml генерируется лишь в том случае, если в Премиум настройках Seo-модуля не активна опция - "Запретить индексацию Гостевой книги поисковыми системами". Если опция активна, карта генерироваться не будет.

Что еще важно! Чтобы не генерировались пустые карты сайта автоматически, не нужно держать активными пустые модули в которых совсем нет материалов. Если не планируете наполнять модуль материалами, лучше удалите его совсем и лишняя пустая карта сайта не будет генерироваться.

Начиная с обновления от 13.09.2023 в карты сайтов модулей где создаются категории, URL категорий теперь так же добавляются в sitemap.

Важно! Если при добавлении карты сайта в вебмастер Google вам в колонке статус сообщается "Не получено", это не проблема с стороны uCoz, это некорректная работа именно Google Webmaster. Обычно чтобы эта ошибка устранилась, достаточно чтобы прошло несколько суток, иногда бывает и несколько часов достаточно.

Стоит усвоить основное понимание по данной ошибке, если карта сайта по прямой ссылке у вас доступна, это уже хорошо и ошибок с стороны uCoz нет. То что гугл сообщает вам об ошибке, это конкретно ошибки вебмастера и скорость обработки sitemap с стороны Google.


До окончания карантина адреса sitemap не надо передавать поисковым системам через панели вебмастера
После окончания карантина можно добавить карты в панель вебматера Яндекса //u.to/32kB
и в инструменты для вебмастеров Google


Некоторые проблемы и причины возникновения проблем


Проблема: Ошибки в вебмастере Яндекса или Google
Некорректный URL (не соответствует местоположению файла Sitemap) или Пути не совпадают или Неизвестный тип ошибки (ERR_HOST_NOT_CONFIRM)

Причины: Вы неправильно указали адрес сайта. Ваш сайт настроен на отображение без www, а в вебмастер вы добавили сайт с www . Или ошибка в написании адреса карты сайта в robots.txt где вы опять же неправильно указали адрес с www или без. Читать подробней о главном зеркале сайта


Проблема: Ошибки в вебмастере Яндекса "Неверный формат документа" В страницах с ошибкой в списке URL и sitemap.xml
Причины:
1)Такую ошибку Яндекс обычно выдает, если находит ссылку на адрес карты сайта в коде страницы. Робот не принимает карту сайта в формате xml со страниц. Это ещё раз говорит о том, что прописывать адреса sitemap.xml в код страниц не стоит. Индексацию это точно не улучшит, а ошибки иногда будете получать

2) Вы закачали свою карту сайта, или стандартную, но исправленную вами на компьютере. Такую ошибку робот выдает при сохранении в неправильной кодировке (должна быть utf-8) или у документа неправильное форматирование. Это значит, что создавать свою карту сайта не надо, достаточно системной. А так же совершенно категорически не стоит заниматься самостоятельными правками sitemap.xml


Проблема: Ошибка в вебмастере Google
Файл не содержит URL
Причина: Такое обычно бывает, если робот Google на новом сайте после окончания карантина в robots.txt находит ссылку на карту сайта форума например, а модуль форума запущен, но пустой. То есть нет форумов, нет тем, нет сообщений
Поэтому пока сайт на карантине старайтесь наполнять информацией все запущенные модули


Проблема: В списке URL карты сайта отсутствуют ссылки на страницы залитые через файловый менеджер
Причина: Страницы залитые в файловый менеджер не попадают в карту сайта, так как не являются системными или страницами модулей. Отсутствие URL на залитые страницы в карте сайта не влияют на индексацию подобных страниц. Для индексации вам надо вывести ссылки на такие страницы на сайт


Проблема: Ошибки сканирования - В файле sitemap - Вебмастер Google (сайт давно снят с карантина)
Причина: Добавленная страница через редактор страниц или любые другие страницы прописаны запретом в файле robots.txt. Проверьте правильно ли составлен у вас robots.txt
Если вы сами прописывали страницу/ы в роботс, то ничего предпринимать не надо - Гугл выдает техническую информацию


Проблема: Количество отправленных (загруженных роботом) и проиндексированных URL не совпадает.Проиндексированных меньше
Причина: Карта сайта не является залогом того, что все URL на вашем сайте будут проиндексированы и попадут в поисковый индекс. Нормальной считается ситуация, когда проиндексировано около 80% загруженных url


Полезная информация


Карта сайта обновляется автоматически раз в 2-4 дня, при условии, что на сайт были добавлены новые материалы.

Если надо по каким либо причинам обновить карту не дожидаясь автоматического обновления, то заходим в файловый менеджер и удаляем карту сайта (карту форума или карту интернет-магазина). Удаленная карта тут же заменится новой, но уже с обновленной информацией. Для первого вызова удаленной карты надо пройти по её адресу, например: site.ru/sitemap.xml

Никогда не выводите ссылки на карту сайта в формате xml на страницы сайта. Индексацию это точно не улучшит, как и степень доверия к вашему сайту у поисковой машины. Роботы имеют доступ к карте через корневую директорию файлового менеджера так же по умолчанию адреса прописаны в robots.txt и не нужно дублировать адрес на страницах.

Не пытайтесь генерировать sitemap с помощью различных программ или всяких сервисов. Кроме блокировки вашего ip и различных вы ничего не получите. Системной карты вполне достаточно, она автоматически обновляется. А залитую карту вам придется каждый раз обновлять вручную. А если учесть настройки запросов во избежании блокировки ip, то это получается бесконечный никчемный труд

Не пытайтесь скачивать карту сайта, вручную делать изменения и закачивать её снова. Любая ошибка с вашей стороны и вы получите массу ошибок индексации или проблем с самой картой сайта. Лучше ничего не трогать

При добавлении карты сайта в форму вебмастера Яндекса нужно добавлять полный адрес карты. Например: //u.to/4AwQ
При добавлении карты в форму вебмастра Google нужно добавлять только sitemap.xml адрес сайта с закрывающим слешем Google подставляет сам.
Прикрепления: 7551743.jpg (2.2 Kb)
va4446
Сообщений: 9
Репутация: 0

Сообщение # 121 | 21:49:01
А можно ли так сделать, чтоб гости не могли читать, а гугл мог? ^_^
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 122 | 22:18:09
va4446, нет. гугл читает с правами гостя

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
MRZM
Сообщений: 47
Репутация: 10

Сообщение # 123 | 22:09:32
Частенько замечал, что сайтоделы размещают в нижней части сайта ссылки на sitemap файлы сайта и форума, для чего? Это поможет поисковым роботам?
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 124 | 22:28:28
PashaPavlikov, не поможет и это не нужно. карта сайта автоматически генерится на сайтах системы и по умолчанию выводится в файле роботс текст. так же в вебмастерах яндекса и гугла можно внести карту сайта
в страницы встраивать не нужно элементы xml в чистом виде

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
MRZM
Сообщений: 47
Репутация: 10

Сообщение # 125 | 22:36:16
webanet, Спасибо, понял, просто на многих сайтах uCoz видел выносят на главную и тп, думал и себе вынести, но оказывается не требуется!
Santoz2181
Сообщений: 34
Репутация: 1

Сообщение # 126 | 22:50:23
Здравствуйте. У меня получилась проблема, моя вина. Удалил сайтмар с моего сайта http://crimealife.org.ua, - это прикрепленный домен, настоящий crimealife.at.ua. Заменил другим, генерирующим. Но теперь гугл в веб мастере отказывается индексировать все мои странички.

http://crimealife.org.ua/board Веб Запрещено в файле robots.txt
http://crimealife.org.ua/blog Веб Запрещено в файле robots.txt

+ не индексирует новостную ленту.

+ отказывается принимать sitemap, пишет:

Ошибки
Ошибка
При попытке доступа к вашему файлу Sitemap произошла ошибка. Убедитесь, что этот файл Sitemap соответствует нашим правилам и находится в указанном местоположении, а затем отправьте его повторно.
1
URL, запрещенный файлом robots.txt
-
25 окт. 2012 г

Прошу вас помочь разобраться в моей проблеме. Очень хочу платить и развивать сайт у вас на укозе. Очень нравится. Зарание благодарю.

Если можете, замените мне на стандартное всё. Спасибо! :(
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 127 | 22:58:15
Santoz2181, удалите ту карту сайта, которую залили сами. она автоматически заменится системной. после этого проследите чтобы гуглу была скормлена ссылка sitemap.xml (адрес сайта со слешем гугл проставляет сам)

через время ошибки исчезнут

у вас старый домен запрещен к индексации. поставьте уже автоматическое перенаправление

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Santoz2181
Сообщений: 34
Репутация: 1

Сообщение # 128 | 23:05:12
Даже сейчас.


Ошибки
Ошибка
При попытке доступа к вашему файлу Sitemap произошла ошибка. Убедитесь, что этот файл Sitemap соответствует нашим правилам и находится в указанном местоположении, а затем отправьте его повторно.
1
URL, запрещенный файлом robots.txt

Добавлено (25-Окт-2012, 23:01:04)
---------------------------------------------
Я уже удалил ту сайтмар, востановился новый, но он тоже не работает.
Спасибо за ответ.

По этому помоду

Quote (webanet)
у вас старый домен запрещен к индексации. поставьте уже автоматическое перенаправление


Как это запрещён, и, что надо сделать, чтобы поставить автоматом? Я не пойму. Извините, спасибо.

Добавлено (25-Окт-2012, 23:05:12)
---------------------------------------------
Извините, а роботс у меня правильно настроен, чтобы раздел новости, и остальные - индексировались?

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/

Host: crimealife.org.ua

Sitemap: http://crimealife.org.ua/sitemap.xml
Sitemap: http://crimealife.org.ua/sitemap-forum.xml

webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 129 | 23:14:20
Santoz2181, роботс настроен правльно. на старом домене роботс закрыт от индексации. если в коде страниц, в меню или ещё где-то фигурируют ссылки на старый домен - вы будете получать ошибки. следите за тем, что бы страницы сайта, материалы не ссылались на старый домен
Quote
При попытке доступа к вашему файлу Sitemap произошла ошибка. Убедитесь, что этот файл Sitemap соответствует нашим правилам и находится в указанном местоположении, а затем отправьте его повторно.

я хочу видеть скрин с проблемой и с датой и временем отправки и проверки

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Santoz2181
Сообщений: 34
Репутация: 1

Сообщение # 130 | 23:24:17




Blacklady5262
Репутация: 0

Сообщение # 131 | 23:37:24
Здравствуйте!
Что делать, если на сайте больше, чем 10000 URLов? Можно ли каким-то образом создавать несколько файлов sitemap по 10000 урлов, если ли вообще в этом необходимость?
usenok2908
Сообщений: 43
Репутация: 20

Сообщение # 132 | 15:37:04
<html>
<head>
<meta http-equiv="content-type" content="text/html; charset=UTF-8">
<title>$SITE_NAME$ - $MODULE_NAME$</title>
<?$META_DESCRIPTION$?>
<link type="text/css" rel="StyleSheet" href="/.s/src/css/823.css" />

</head>
подскажите пожалуйста куда именно вставлять ключевые слова для сайта,у меня 19 страниц... :'( :'( :'( :'( :'( :'( :( :( :( я полный чайник,помогите,уже голову сломала

Добавлено (31-Окт-2012, 15:37:04)
---------------------------------------------
<html>
<head>
<meta http-equiv="content-type" content="text/html; charset=UTF-8">
<title>$SITE_NAME$ - $MODULE_NAME$</title>
<?$META_DESCRIPTION$?>
<link type="text/css" rel="StyleSheet" href="/.s/src/css/823.css" />

</head>
подскажите пожалуйста куда именно вставлять ключевые слова для сайта,у меня 19 страниц... :'( :'( :'( :'( :'( :'( :( :( :(


Amati5210
Сообщений: 125
Репутация: 16

Сообщение # 133 | 17:44:11
Quote (usenok2908)
<link type="text/css" rel="StyleSheet" href="/.s/src/css/823.css" />

</head>
подскажите пожалуйста куда именно вставлять ключевые слова для сайта,у меня 19 страниц..


Главная страница

<title>$SITE_NAME$ - $MODULE_NAME$</title>
<?$META_DESCRIPTION$?>
<meta name="title" content="Название сайта" />
<meta name="description" content="Краткое описание материала" />
<meta name="keywords" content="Ключевые слова " />
<meta name="robots" content="index,follow" /> подсказка роботу что именно нужно индексировать. В данном случае, всю страницу
<meta name="revisit-after" content="1 days" /> Через сколько времени планируется обновлять материал, для повторного посещения роботом

Страницы сайта

После <link type="text/css" rel="StyleSheet" href="/.s/src/css/823.css" /> и вставляй.
<title>Название вашего сайта - $MODULE_NAME$</title><?$META_DESCRIPTION$?>
<?if($URI_ID$='page №')?> (Номер страницы. Конструктор-Список переменных страниц-$URI_ID$)
<meta name="description" content="краткое описание страницы " />
<meta name="keywords" content="ключевые слова страницы" />
<meta name="robots" content="all" />
<?endif?>
Дизайн-Управление дизайном (шаблоны)-Страницы сайта. Вводишь все 19 страниц.
Будут вопросы-обращайся.

Мой сайт РемДомТех
Сообщение отредактировал Amati5210 - Среда, 31 Окт 2012, 18:46:27
ZIK5ZIK
Репутация: 0

Сообщение # 134 | 00:50:04
В файловом менеджере у меня только sitemap-forum.xml и sitemap-shop.xml, а sitemap.xml нет! sitemap.xml должен быть в файловом менеджере или нет?
rozalina
Репутация: 0

Сообщение # 135 | 22:05:54
ZIK5ZIK, sitemap.xml в файловый менеджер можно добавить
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Sitemap.xml карта сайта (Sitemap.xml карта сайта для поисковых роботов)
Поиск: