Главная › Новости

Создание файла Robots.txt. Роль файла sitemap.xml

Опубликовано: 10.06.2017

Создание файла Robots.txt с помощью плагина All In One Seo Pack

Файл sitemap.xml содержит всю информацию, которая находится на сайте. Оба этих файл создаются при помощи абсолютно любого текстового редактора. Создать и настроить их не представляет большого труда. Файл Robots.txt имеет определенные директивы

Текстовый документ, находящийся в основной директории ресурса, называется Robots.txt. Содержание данного файла включает инструкции для роботов-поисковиков. Основными его возможностями являются: запрет конкретных страниц веб-сайта к индексации, а также указание его главного зеркала. Помимо всего прочего, Robots.txt указывает путь к файлу sitemap.xml.

Документ, содержащий всю информацию о сайте, называется sitemap. Главная его функция заключается в упрощении индексации ресурса роботами-поисковиками. Данный файл не является обязательным для тех сайтов, количество страниц которых не превышает пятьдесят. С его помощью роботы-поисковики узнают о местонахождении страниц, периодичности их обновления, а также о приоритетах в индексации. Как указано выше, можно указать путь к sitemap.xml, и тем самым, обозначить его наличие, с помощью файла Robots.txt. Создание данного документа не требует каких-либо особых усилий, достаточно воспользоваться любым текстовым редактором (к примеру, блокнотом). Также можно использовать специальные сервисы (к примеру, htmlweb.ru). Формат данного файла должен быть только XML. Для создания sitemap.xml, в первую очередь, требуется вписать адрес ресурса в строку URL, выбрать подходящий формат файла, обозначить приоритет индексации страниц веб-сайта, поставить периодичность их обновления и определить иные параметры, которые необходимы. После проведения данной процедуры нужно нажать «Выполнить». Через определенный промежуток времени в окне ниже появится код для созданного файла. Остается всего лишь его скопировать, поместить в sitemap.xml и прописать путь к нему в файле Robots.txt.