Открыть главное меню

Robots.txt/sitemap.xml: различия между версиями

Строка 1: Строка 1:
'''Файлы типа robots.txt/sitemap.xml возможно обновить самостоятельно через панель управления.'''<br><br>
+
Файлы robots.txt и sitemap.xml - это файлы, предназначенные для поисковых систем.
 +
 
 +
''Robots.txt'' - файл для разрешения или запрета индексации страниц поисковиками. В файле robots.txt можно указать параметры индексирования своего сайта как для всех роботов сразу, так и для каждой поисковой системы по отдельности. В целом файл robots носит запрещающий смысл, т.е. в нём прописывается то, что нужно запретить к индексации.
 +
 
 +
''Sitemap.xml'' - файл с дополнительной информацией о страницах сайта, подлежащих индексированию. С помощью файла sitemap.xml можно сообщить поисковым системам, какие страницы вашего сайта нужно индексировать, как часто обновляется информация на страницах, а также индексирование каких страниц наиболее важно.
 +
 
 +
В платформе ABCP вы можете самостоятельно управлять данными файлами.<br><br>'''Файл robots.txt'''
 +
 
 +
Настройки для управления данным файлом находятся в панели управления меню Настройки->Система->Редактирование robots.txt.
 +
 
 +
'''''Возможны три варианта индексации:'''''
 +
 
 +
*Запретить индексирование
 +
 
 +
При выборе данного варианта вы отключаете индексирование сайта полностью.
 +
 
 +
*Разрешить индексирование
 +
 
 +
В данном варианте используется стандартный файл robots.txt платформы ABCP.
 +
 
 +
*Использовать собственный файл robots.txt
 +
 
 +
Вариант для самостоятельного формирования файла robots.txt по вашим требованиям.
 +
 
 +
[[Файл:Robots.jpg|альт=1]]
 +
 
 +
 
 +
'''Файл sitemap.xml'''
 +
 
 +
Настройки для управления данным файлом находятся в панели управления меню Настройки->Система->Редактирование sitemap.xml.
 +
 
 +
'''''Возможны три варианта настройки:'''''
 +
 
 +
*''Не использовать''
 +
 
 +
Файл sitemap.xml не используется.
 +
 
 +
*''Автоматическая генерация (запускается на 30й минуте каждого часа)''
 +
 
 +
В данном варианте файл sitemap.xml генерируется автоматически.
 +
 
 +
Можно по выбору настроить генерацию одного из нескольких файлов:
 +
 
 +
<nowiki>http://www.site.ru/sitemap2.xml</nowiki> - страницы новостей
 +
 
 +
<nowiki>http://www.site.ru/sitemap3.xml</nowiki> - все созданные в панели управления личные страницы, а также некоторые системные страницы
 +
 
 +
<nowiki>http://www.site.ru/sitemap4_*.xml</nowiki> - страницы карточек товаров с индивидуальными данными, загруженные в панели управления меню-> Информация о товарах->Просмотр карточек товаров.
 +
 
 +
<nowiki>http://www.site.ru/sitemap6_*.xml</nowiki> - страницы карточек товаров из наличия складов модуля TS.
 +
 
 +
*''Использовать собственный файл sitemap.xml''
 +
 
 +
Вариант для загрузки собственного файла sitemap.xml.
 +
 
 +
 
 +
[[Файл:2691e24fed.jpg|альт=1]]
  
Интерфейс в ПУ => Настройка => Система => Редактирование robots.txt. Вы можете самостоятельно выбрать необходимые настройки для роботов поисковых систем.<br>
 
  
  
Интерфейс в ПУ => Настройка => Система => Редактирование sitemap.xml.<br>
 
Вы можете самостоятельно загрузить необходимый вам sitemap, либо выбрать автоматическую генерацию sitemap для сайта, которая происходит раз в 30 минут (в это время проверяется обновление страниц, если оно произошло, то в sitemap вносятся изменения).<br>
 
При выборе автоматической генерации создается корневой файл http:/ /ваш_сайт/sitemap.xml, который содержит ссылки на все имеющиеся sitemap'ы.
 
* sitemap2.xml (новости)
 
* sitemap3.xml (личные и некоторые системные страницы)
 
* sitemap4_0.xml (индивидуальные карточки товаров)<br>Если карточек много, тогда будет создано несколько sitemap'ов:<br>http:/ /ваш_сайт/sitemap4_0.xml<br>http:/ /ваш_сайт/sitemap4_1.xml<br>http:/ /ваш_сайт/sitemap4_2.xml<br>http:/ /ваш_сайт/sitemap4_3.xml<br>
 
 
Вы можете отметить, какой из sitemap'ов не нужно автоматически генерировать, сняв напротив него чекбокс.
 
Вы можете отметить, какой из sitemap'ов не нужно автоматически генерировать, сняв напротив него чекбокс.
  

Версия 13:19, 2 апреля 2020

Файлы robots.txt и sitemap.xml - это файлы, предназначенные для поисковых систем.

Robots.txt - файл для разрешения или запрета индексации страниц поисковиками. В файле robots.txt можно указать параметры индексирования своего сайта как для всех роботов сразу, так и для каждой поисковой системы по отдельности. В целом файл robots носит запрещающий смысл, т.е. в нём прописывается то, что нужно запретить к индексации.

Sitemap.xml - файл с дополнительной информацией о страницах сайта, подлежащих индексированию. С помощью файла sitemap.xml можно сообщить поисковым системам, какие страницы вашего сайта нужно индексировать, как часто обновляется информация на страницах, а также индексирование каких страниц наиболее важно.

В платформе ABCP вы можете самостоятельно управлять данными файлами.

Файл robots.txt

Настройки для управления данным файлом находятся в панели управления меню Настройки->Система->Редактирование robots.txt.

Возможны три варианта индексации:

  • Запретить индексирование

При выборе данного варианта вы отключаете индексирование сайта полностью.

  • Разрешить индексирование

В данном варианте используется стандартный файл robots.txt платформы ABCP.

  • Использовать собственный файл robots.txt

Вариант для самостоятельного формирования файла robots.txt по вашим требованиям.

1


Файл sitemap.xml

Настройки для управления данным файлом находятся в панели управления меню Настройки->Система->Редактирование sitemap.xml.

Возможны три варианта настройки:

  • Не использовать

Файл sitemap.xml не используется.

  • Автоматическая генерация (запускается на 30й минуте каждого часа)

В данном варианте файл sitemap.xml генерируется автоматически.

Можно по выбору настроить генерацию одного из нескольких файлов:

http://www.site.ru/sitemap2.xml - страницы новостей

http://www.site.ru/sitemap3.xml - все созданные в панели управления личные страницы, а также некоторые системные страницы

http://www.site.ru/sitemap4_*.xml - страницы карточек товаров с индивидуальными данными, загруженные в панели управления меню-> Информация о товарах->Просмотр карточек товаров.

http://www.site.ru/sitemap6_*.xml - страницы карточек товаров из наличия складов модуля TS.

  • Использовать собственный файл sitemap.xml

Вариант для загрузки собственного файла sitemap.xml.


1


Вы можете отметить, какой из sitemap'ов не нужно автоматически генерировать, сняв напротив него чекбокс.

Обратите внимание, что карта сайта индивидуальных карточек товаров создается таким образом, что карточки, в которых не указан ни один из SEO-атрибутов, в неё не попадают.

Индексация происходит не сразу после внесения информации в sitemap.xml. Может пройти довольно долгое время (особенно для Яндекса), прежде чем поисковая система проиндексирует Ваш сайт. Для Яндекса можно ускорить индексацию, добавив сайт и в sitemapы Яндекс.Вебмастер.

Примечание: пожалуйста, учтите, что данные интерфейсы недоступны для франчайзи.