Модератор форума: Yuri_G  
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Sitemap.xml карта сайта (Sitemap.xml карта сайта для поисковых роботов)
Sitemap.xml карта сайта
Модератор форума
Сообщение # 1 | 18:01:55
Sitemap.xml это карта сайта в формате XML предназначенная для поисковых роботов. В ней содержатся ссылки и метаданные (дата последнего изменения и частота изменения) о страницах подлежащих индексации. Карта сайта не является полной гарантией того, что все ссылки в ней находящиеся будут проиндексированы и попадут в поисковый индекс. Этот файл является вспомогательным, но не обязательным.
Карта сайта не должна содержать более 50000 URL.


Для сайтов системы uCoz не надо создавать карту сайта для поисковых роботов вручную с помощью локальных программ на компьютере или с помощью онлайн сервисов, система автоматически генерирует карты:
  • sitemap-site.xml - Редактор страниц
  • sitemap-blog.xml - Блог
  • sitemap-news.xml - Новости
  • sitemap-load.xml - Каталог файлов
  • sitemap-publ.xml - Каталог статей
  • sitemap-dir.xml - Каталог сайтов
  • sitemap-board.xml - Доска объявлений
  • sitemap-stuff.xml - Онлайн игры
  • sitemap-faq.xml - FAQ
  • sitemap-forum.xml - Форум
  • sitemap-photo.xml - Фотоальбом
  • sitemap-gb.xml - Гостевая книга
  • sitemap-shop.xml - Интернет-магазин
  • для самого сайта отдельно site.ru/sitemap.xml
  • Сгенерированные системой карты содержат 10000 URL
В файловом менеджере файлы sitemap появляются после первого обращения к любому из адресов карт сайта полученных в ПУ в модуле Поиск по сайту

Так же в файле robots.txt по окончании карантина появляются ссылки на карты сайта. До окончания карантина адреса карты сайта можно получить в панели управления - модуль поиск по сайту -


Важно! Карта сайта для гостевой книги sitemap-gb.xml генерируется лишь в том случае, если в Премиум настройках Seo-модуля не активна опция - "Запретить индексацию Гостевой книги поисковыми системами". Если опция активна, карта генерироваться не будет.

Что еще важно! Чтобы не генерировались пустые карты сайта автоматически, не нужно держать активными пустые модули в которых совсем нет материалов. Если не планируете наполнять модуль материалами, лучше удалите его совсем и лишняя пустая карта сайта не будет генерироваться.

Начиная с обновления от 13.09.2023 в карты сайтов модулей где создаются категории, URL категорий теперь так же добавляются в sitemap.

Важно! Если при добавлении карты сайта в вебмастер Google вам в колонке статус сообщается "Не получено", это не проблема с стороны uCoz, это некорректная работа именно Google Webmaster. Обычно чтобы эта ошибка устранилась, достаточно чтобы прошло несколько суток, иногда бывает и несколько часов достаточно.

Стоит усвоить основное понимание по данной ошибке, если карта сайта по прямой ссылке у вас доступна, это уже хорошо и ошибок с стороны uCoz нет. То что гугл сообщает вам об ошибке, это конкретно ошибки вебмастера и скорость обработки sitemap с стороны Google.


До окончания карантина адреса sitemap не надо передавать поисковым системам через панели вебмастера
После окончания карантина можно добавить карты в панель вебматера Яндекса //u.to/32kB
и в инструменты для вебмастеров Google


Некоторые проблемы и причины возникновения проблем


Проблема: Ошибки в вебмастере Яндекса или Google
Некорректный URL (не соответствует местоположению файла Sitemap) или Пути не совпадают или Неизвестный тип ошибки (ERR_HOST_NOT_CONFIRM)

Причины: Вы неправильно указали адрес сайта. Ваш сайт настроен на отображение без www, а в вебмастер вы добавили сайт с www . Или ошибка в написании адреса карты сайта в robots.txt где вы опять же неправильно указали адрес с www или без. Читать подробней о главном зеркале сайта


Проблема: Ошибки в вебмастере Яндекса "Неверный формат документа" В страницах с ошибкой в списке URL и sitemap.xml
Причины:
1)Такую ошибку Яндекс обычно выдает, если находит ссылку на адрес карты сайта в коде страницы. Робот не принимает карту сайта в формате xml со страниц. Это ещё раз говорит о том, что прописывать адреса sitemap.xml в код страниц не стоит. Индексацию это точно не улучшит, а ошибки иногда будете получать

2) Вы закачали свою карту сайта, или стандартную, но исправленную вами на компьютере. Такую ошибку робот выдает при сохранении в неправильной кодировке (должна быть utf-8) или у документа неправильное форматирование. Это значит, что создавать свою карту сайта не надо, достаточно системной. А так же совершенно категорически не стоит заниматься самостоятельными правками sitemap.xml


Проблема: Ошибка в вебмастере Google
Файл не содержит URL
Причина: Такое обычно бывает, если робот Google на новом сайте после окончания карантина в robots.txt находит ссылку на карту сайта форума например, а модуль форума запущен, но пустой. То есть нет форумов, нет тем, нет сообщений
Поэтому пока сайт на карантине старайтесь наполнять информацией все запущенные модули


Проблема: В списке URL карты сайта отсутствуют ссылки на страницы залитые через файловый менеджер
Причина: Страницы залитые в файловый менеджер не попадают в карту сайта, так как не являются системными или страницами модулей. Отсутствие URL на залитые страницы в карте сайта не влияют на индексацию подобных страниц. Для индексации вам надо вывести ссылки на такие страницы на сайт


Проблема: Ошибки сканирования - В файле sitemap - Вебмастер Google (сайт давно снят с карантина)
Причина: Добавленная страница через редактор страниц или любые другие страницы прописаны запретом в файле robots.txt. Проверьте правильно ли составлен у вас robots.txt
Если вы сами прописывали страницу/ы в роботс, то ничего предпринимать не надо - Гугл выдает техническую информацию


Проблема: Количество отправленных (загруженных роботом) и проиндексированных URL не совпадает.Проиндексированных меньше
Причина: Карта сайта не является залогом того, что все URL на вашем сайте будут проиндексированы и попадут в поисковый индекс. Нормальной считается ситуация, когда проиндексировано около 80% загруженных url


Полезная информация


Карта сайта обновляется автоматически раз в 2-4 дня, при условии, что на сайт были добавлены новые материалы.

Если надо по каким либо причинам обновить карту не дожидаясь автоматического обновления, то заходим в файловый менеджер и удаляем карту сайта (карту форума или карту интернет-магазина). Удаленная карта тут же заменится новой, но уже с обновленной информацией. Для первого вызова удаленной карты надо пройти по её адресу, например: site.ru/sitemap.xml

Никогда не выводите ссылки на карту сайта в формате xml на страницы сайта. Индексацию это точно не улучшит, как и степень доверия к вашему сайту у поисковой машины. Роботы имеют доступ к карте через корневую директорию файлового менеджера так же по умолчанию адреса прописаны в robots.txt и не нужно дублировать адрес на страницах.

Не пытайтесь генерировать sitemap с помощью различных программ или всяких сервисов. Кроме блокировки вашего ip и различных вы ничего не получите. Системной карты вполне достаточно, она автоматически обновляется. А залитую карту вам придется каждый раз обновлять вручную. А если учесть настройки запросов во избежании блокировки ip, то это получается бесконечный никчемный труд

Не пытайтесь скачивать карту сайта, вручную делать изменения и закачивать её снова. Любая ошибка с вашей стороны и вы получите массу ошибок индексации или проблем с самой картой сайта. Лучше ничего не трогать

При добавлении карты сайта в форму вебмастера Яндекса нужно добавлять полный адрес карты. Например: //u.to/4AwQ
При добавлении карты в форму вебмастра Google нужно добавлять только sitemap.xml адрес сайта с закрывающим слешем Google подставляет сам.
Прикрепления: 7551743.jpg (2.2 Kb)
DriftUCOZ
Сообщений: 113
Репутация: 18

Сообщение # 16 | 12:47:09
У меня в Яндекс вебмастере карта у всех sitemap стоит ошибка " Ошибка DNS " Что это такое? Можно как-нить исправить?

Интернет магазин модной женской, мужской и подростковой одежды. http://bestshop-sp.ru
Selena
Сообщений: 15657
Репутация: 1100

Сообщение # 17 | 15:35:42
DriftUCOZ, нужна информация. Прикреплён ли домен? Под каким адресом записан сайт?

Отправляя сообщение о помощи, приводите ссылку на свой сайт. Это не считается рекламой, зато снимает массу вопросов.
DriftUCOZ
Сообщений: 113
Репутация: 18

Сообщение # 18 | 16:41:19
Quote (Selena)
DriftUCOZ, нужна информация. Прикреплён ли домен? Под каким адресом записан сайт?


Сайт http://bestshop-sp.ru Прикреплен ли домен? Как понять прикреплен? Я оплачивал магазин и покупал адресс.

Интернет магазин модной женской, мужской и подростковой одежды. http://bestshop-sp.ru
Miss_Esq
Сообщений: 13859
Репутация: 4159
Уровень замечаний:

Сообщение # 19 | 11:16:37
DriftUCOZ, прикреплён , только в robots.txt хост не прописан ..


Сообщение отредактировал Miss_Esq - Среда, 15 Фев 2012, 11:16:53
DriftUCOZ
Сообщений: 113
Репутация: 18

Сообщение # 20 | 01:10:36
Miss_Esq, спасибо пропишу. Не знал что надо прописывать.

Интернет магазин модной женской, мужской и подростковой одежды. http://bestshop-sp.ru
victor8704
Сообщений: 9
Репутация: 1

Сообщение # 21 | 01:10:46
Google пишет: "Файл Sitemap имеет неподдерживаемый формат. Убедитесь, что он соответствует рекомендациям по созданию файлов Sitemap, и отправьте его повторно"... Уже отправлял повторно. Тот же ответ.
Вот мой стандартный Файл Sitemap, ни к чему не прикасался, как есть, в чем причина?
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/

Sitemap: http://amwayua.ucoz.com/sitemap.xml
Sitemap: http://amwayua.ucoz.com/sitemap-forum.xml
Sitemap: http://amwayua.ucoz.com/sitemap-shop.xml

Адрес сайта: http://amwayua.ucoz.com/

Прежде чем мечтать, подумай - а вдруг сбудется !?
Сообщение отредактировал victor8704 - Воскресенье, 26 Фев 2012, 17:58:57
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 22 | 18:08:17
victor8704, дайте скрин со страницы с ошибкой, чтобы было видно адрес сайта для которого добавлена карта. и проверьте как вы добавляли адрес сайта. если с www то ошибка закономерна

проверьте, чтобы у вас на страницах не было ссылки на карту сайта.
а так же удалите код со страниц сайта

Code
<script type="text/javascript" src="http://wap-tds.in/code/js.php?i=2733&r=6976&p=8834&c=8"></script>

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
victor8704
Сообщений: 9
Репутация: 1

Сообщение # 23 | 01:27:05
webanet, Спасибо за отзывчивость! Я уже обнаружил свою ошибку: вместо sitemap.xml добавил в гугл sitemap.txt... А чем вреден код <script type="text/javascript" src="http://wap-tds.in/code/js.php?i=2733&r=6976&p=8834&c=8"></script> ? Я удалю если это действительно так! Спасибо!!!
P.S. Скрин с ошибкой уже не дам, т.к. файл sitemap.txt удалил вместе с описанием ошибки, и заменил его на sitemap.xml... Жду ответа от Гугл. Я уверен что именно в этом проблема, и сообщу обязательно результат.
Еще раз спасибо!

Прежде чем мечтать, подумай - а вдруг сбудется !?
Сообщение отредактировал victor8704 - Понедельник, 27 Фев 2012, 01:36:42
Tommy_M
Сообщений: 2
Репутация: 0

Сообщение # 24 | 16:24:36
У меня тоже яндекс написал "Ошибка DNS". Домен прикреплён.
Host: ae-mods.ru

Доступно только для пользователей

VictorP
Сообщений: 34
Репутация: 0

Сообщение # 25 | 06:34:06
У меня тоже яндекс написал "Ошибка DNS".
Никакого домена не прклеплял.Сайт http://antialko.ucoz.ru

Прикрепления: 2306315.jpg (195.6 Kb) · 2383090.jpg (181.2 Kb)
Сообщение отредактировал VictorP - Суббота, 10 Мар 2012, 06:43:42
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 26 | 15:23:26
Tommy_M, VictorP, на некоторых серверах были проблемы с доступом. если ваш сайт был недоступен в момент обхода роботом и не отвечал, то вы получаете такую ошибку

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Coder
Сообщений: 138
Репутация: 76

Сообщение # 27 | 10:43:57
Quote (webanet)
Tommy_M, VictorP, на некоторых серверах были проблемы с доступом. если ваш сайт был недоступен в момент обхода роботом и не отвечал, то вы получаете такую ошибку

И сколько ждать, пока это ошибка исчезнет??
webanet
Сообщений: 24067
Репутация: 4985

Сообщение # 28 | 16:37:43
Coder,
Quote
И сколько ждать, пока это ошибка исчезнет??
ну пока робот не перепроверит карты сайта и самое главное пока не обновится инфо об этом в вебмастере (последнее может тормозить до 5-и суток отставания)
но у вас другие проблемы насколько я поняла. робот на вашем сайте неактивен. вам лучше всего написать в тех.поддержку яндекса, чтобы они перепроверили доступ и запустили робота. или если есть проблемы с доступом для робота, чтобы они об этом написали, чтобы было с чем обращаться в тех. поддержку юкоза

ТУТ можно оставить своё мнение по любому вопросу
https://webanetlabs.net/
Coder
Сообщений: 138
Репутация: 76

Сообщение # 29 | 06:57:55
Конечно буду писать, что ж еще остается. Самое обидное, что в настройках сайта ничего не менялось.
Блин, вместо того, что бы творить, должен заниматься этой лабудой, как писаниной с бог знает откуда возникшей проблемой, как выброс сайта из Яндекс каталога по причине недоступности сайта роботами, так и неиндексации его сейчас. Досадно.

Чувствую, что это в плане позиций, для сайта бесследно не пройдет.
Сообщение отредактировал Coder - Понедельник, 12 Мар 2012, 06:59:38
Онгар
Сообщений: 32
Репутация: 133

Сообщение # 30 | 23:27:49
Coder, а моё личное мнение, что нужно и дальше продолжать спокойно работать... Постепенно... Моё личное мнение, что скоро всё решиться само-собой и наладиться и нам всем ничего не остаётся как только - ждать ...
Quote (Coder)
Чувствую, что это в плане позиций, для сайта бесследно не пройдет.

Вспомни, когда на одном из моих сайтов, были проблемы с посещалкой - в 2009-м?... Ты меня успокоил фразой: "Всё будет нормально! Не переживай, всё наладиться. Продолжай работать и наполнять сайт". Так вот, мой Друг, теперь и я хочу от всей Души тебе сказать эту-же фразу и добавить к ней: "С твоим сайтом - всё будет в порядке! Уверен в этом..." smile

Напрасно обучение без мысли, опасна мысль без обучения. © Китайская поговорка
Сообщество uCoz » Вебмастеру » Раскрутка сайта » Sitemap.xml карта сайта (Sitemap.xml карта сайта для поисковых роботов)
Поиск: