Настройка sitemap.xml и robots.txt

Правильная настройка файла robots.txt и sitemap.xml позволит исключить возможные проблемы, возникающие при индексации.

• § 1. Файл robots.txt
• 1.1. Настройка robots
• 1.2. Проверить файл robots.txt и мета теги
• § 2. Файл sitemap.xml
• 2.1. Карта сайта Sitemap.html(для посетителей)
• 2.1.1. Поиск на сайте через Яндекс
• 2.2. Карта сайта Sitemap.xml (для поисковиков)

§ 1. Файл robots.txt

Это обыкновенный файл, который должен находиться в корне вашего сайта, там же где находится и правильный htaccess, и этот файл говорит поисковым роботам как именно индексировать ваш проект, на какие страницы не стоит обращать внимание, а каким уделить особое внимание

Файл содержит инструкции, предназначенные для поисковых ботов. Размещается он обязательно в корневой директории, благодаря чему индексацию страницы боты начнут именно с чтения условий, изложенных в robots.txt.

Рассмотрим преимущества robots.txt, которые он дает ресурсу.

Файл robots.txt должен находиться на сервере, в корне вашего сайта. Можно также посмотреть на любом сайте в Интернет, для этого достаточно после адреса сайта добавить /robots.txt .

Файл robots.txt , у каждого сайта имеет свои особенности и бездумное копирование чужого файла, может создать проблемы с индексированием вашего сайта поисковыми роботами. Поэтому нужно четко понимать назначение файла robots.txt и назначение инструкций (директив), которые будете использовать, при его создании.

Инструкции файла robots.txt могут:

Запрещать к просмотру страницы (каталоги) для всех поисковых роботов;

Запрещать к просмотру страницы (каталоги) для выделенных поисковых роботов;

Производить редирект на другую страницу при ошибке 404;

Указывать на местонахождение карты сайта;

Указывать время загрузки страниц для индексации.

1.1. Настройка

Создать файл robots.txt , можно воспользоваться любым текстовым редактором, например Блокнотом . Легко написать вручную, не прибегая к помощи различных конструкторов. Для одного сайта нужен один такой файл.

Что нужно прописывать в файле?

Обязательно употребление двух директив: User-agent и Disallow .

User-agent определяет, какому боту адресовано данное послание, Disallow показывает, какую страницу или директорию ресурса запрещено индексировать.

Cписок имен ботов самых популярных поисковых систем:

1.2. Проверить файл robots.txt и мета теги

У некоторых вебмастеров вообще не индексируются сайт целиком или часть и что бы вы не делали, роботы не индексируют сайт. Причиной всему может быть файл robots.txt. Возможно в нем допущена ошибка или он сделан не правильно. Проверьте файл robots.txt на наличие в нем ошибок (например, строка Disallow: / закрывает сайт от индексации целиком или Disallow: /news/ закрывает к индексации раздел новостей.) или закрытых важных директорий. Если закрыта директория которая должна быть проиндексирована, то откройте ее.

Пример правильного файла на этом сайте.

User-agent: Google
Disallow: /assets/cache/
Disallow: /assets/docs/
Disallow: /assets/export/
Disallow: /assets/import/
Disallow: /assets/modules/
Disallow: /assets/plugins/
Disallow: /assets/snippets/
Disallow: /install/
Disallow: /manager/
Disallow: /?
Disallow: /*?
Disallow: /index.php
Allow: /assets/images/

User-agent: Mail.ru
Disallow: /assets/cache/
Disallow: /assets/docs/
Disallow: /assets/export/
Disallow: /assets/import/
Disallow: /assets/modules/
Disallow: /assets/plugins/
Disallow: /assets/snippets/
Disallow: /install/
Disallow: /manager/
Disallow: /?
Disallow: /*?
Disallow: /index.php
Allow: /assets/images/

User-agent: *
Disallow: /assets/cache/
Disallow: /assets/docs/
Disallow: /assets/export/
Disallow: /assets/import/
Disallow: /assets/modules/
Disallow: /assets/plugins/
Disallow: /assets/snippets/
Disallow: /install/
Disallow: /manager/
Disallow: /?
Disallow: /*?
Disallow: /index.php
Allow: /assets/images/

Host: http://сайт
Sitemap: http://сайт/sitemap.xml

Лучше указывать инструкции для каждого поисковика, который представляет для вас интерес по отдельности, а также для указать инструкцию для всех других поисковиков.

User-agen t - указывает на поисковик, для которого пишется инструкция.

Allow - разрешает индексацию.

Disallow - запрещает индексацию.

Host - указывает на основной хост.

Sitemap - указывает поисковику на xml карту сайта.

Еще сайт может не индексироваться из-за мета тега для google и для яндекса. Если на странице размещены эти коды, то поисковые роботы не будет индексировать такие страницы или части страниц. если вы хотите что бы страницы индексировалось нужно удалить из кода эти мета теги.

Пример Robots.txt

На основе вышеуказанных данных можно вывести полноценный файл robots.

Теперь, когда вы знаете основные моменты разобранного нами файла, вы сможете управлять индексацией своего сайта: запрещать и открывать к индексации желаемые вами файлы, папки и страницы.

§ 2. Файл sitemap.xml

Файл Sitemap — это файл с информацией о страницах сайта, подлежащих индексированию. С помощью файла sitemap.xml веб-мастеры могут сообщать поисковым системам о веб-страницах, которые доступны для сканирования.

Основные требования к файлу Sitemap:

Файл должен располагаться на том же домене, что и сайт, для которого он составлен.

- При обращении к файлу сервер должен возвращать HTTP-статус с кодом 200 OK .

Файл может содержать не более 50 000 URL, а его размер в несжатом виде не должен превышать 10 Мб. Если ваш sitemap не удовлетворяет этим требованиям, разбейте его на несколько отдельных файлов и укажите их в файле индекса sitemap.

В файле необходимо использовать кодировку UTF-8.

Файл может описывать только страницы того домена, на котором он расположен.

Создать карту Sitemap для своего сайта можно несколькими способами:

используя плагины и онлайн-генераторы, а также составляя ее вручную.

О том, как это сделать, какой генератор карты (sitemap generator) использовать и как добавить карту в поисковые системы Яндекс и Гугл, вы узнаете из этой статьи.

2.1 Карта сайта Sitemap.html (для посетителей)

Карта сайта (для посетителей) - это форма дополнительной навигации по сайту. С её помощью пользователь может передвигаться по сайту, не используя навигацию сайта.

При создании карты сайта для посетителей обратите внимание на важные моменты:

1. Расположение на видном месте . Карта должна находиться там, где ее будет сразу видно (например, в главном меню сайта или блога).

2. Правильная структура и форматирование . Качественная карта сайта обязательно содержит заголовки, подзаголовки и другие элементы форматирования. Это делает информацию более удобной для восприятия, посетителям будет проще найти те материалы, которые их интересуют.

3. Наличие краткого описания . Небольшие комментарии к отдельным страницам сайта, или категориям, или же один комментарий ко всей карте сайта - это дополнительное удобство для посетителя.

2.1.1. Поиск на сайте через Яндекс

Яндекс поиск для сайта исправит все недочёты и значительно упростит посетителям пользование вашим сайтом — информацию они смогут находить гораздо быстрее.

С настройками Яндекс поиска разберётся любой, кто даже не смыслит в языках программирования HTML и PHP, и не знаком с CSS.

Результаты Яндекс поиска более качественные, нежели результаты стандартного поиска. Они получаются наиболее релевантные искомому слову или предложению. Посетители задерживаются так на вашем сайте немного дольше, даже если они не находят абсолютного релевантного ответа на свой вопрос;

Яндекс поиск для сайта учитывает лексику и морфологию языка, позволяет использовать поисковые подсказки и настраивать поисковую форму и другие параметры. И всё это — бесплатно и без ограничений.

2.2 Карта сайта Sitemap.xml (для поисковиков)

Ограничения и особенности

Поисковые системы благоприятно относятся к сайтам, имеющим карту Sitemap.xml. Дело в том, что при ее наличии роботы поисковиков индексируют страницы сайта быстрее и лучше (уменьшается вероятность, что какая-та страница будет случайно пропущена). Очевидно, что карта сайта способствует более быстрому увеличению посещаемости сайта. Однако при этом поисковые системы накладывают на карту сайта Sitemap. xml определенные ограничения :

файл Sitemap должен содержать не более 50 тыс. ссылок и иметь размер не более 10 Мбайт (допускается использование архивации для уменьшения размера файла).

Что же делать, если ваш сайт настолько большой, что карта сайта превышает вышеуказанные значения. В этом случае можно поступать следующим образом:

2. создавать несколько карт сайта (например, основную, содержащую ссылки на все другие карты, и еще несколько второстепенных).

И даже если данные требования будут выполнены, нет гарантии, что поисковые системы будут придерживаться файла Sitemap. xml при индексации.

2.3. Онлайн-генераторы карты сайта Sitemap

Онлайн-генераторы (generator Sitemap) позволяют формировать карту сайта в виде отдельного файла. При добавлении новых страниц (или при удалении старых) придется формировать карту сайта с помощью генератора и снова добавлять ее на свой сайт.

Генератор Xml-Sitemaps

Простой и удобный генератор карты сайта, имеющий несколько серьезных недостатков:

Количество ссылок в карте может быть не более 500;

Нет возможности настраивать приоритет для отдельных групп страниц (посты, страницы, категории, метки и т.д.);

Нет возможности указывать частоту обновления для отдельных групп страниц;

Генератор просматривает «мусорные» ссылки, которые не должны находиться в карте сайта (ссылки на комментарии, ссылки-отклики, ссылки «печать» и т.д.).

Перейти на сайт генератора можно . Перед вами появится форма, которую нужно заполнить.

1. Ввоим адрес главной страницы сайта .

2. выбираем «примерной» частоты обновления сайта.

3. Настраиваем дату обновления страниц сайта (None - не использовать; Use server’s response - определить автоматически; Use this date/time - использовать текущие дату и время).

4. Настраиваем приоритет страниц для поисковых систем (None - не использовать; Automatically Calculated Priority - вычислять автоматически).

Кнопка «Start» — запуск генератора .

Спустя некоторое время карта будет сформирована. Появится страница, где по ссылке вы сможете скачать карту Sitemap.xml и добавить ее в корневой каталог сайта (как правило, это папка - «public_html»).

Путь к карте можно будет прописать в файле robots.txt с помощью следующего оператора:

Sitemap: http://ваш сайт /sitemap.xml

Http://ваш сайт /sitemap.xml - путь к карте сайта.

Генератор Mysitemapgenerator

1. Первым делом пройдите на сайт mysitemapgenerator.com Этот сервис даёт возможность сгенерировать бесплатную карту сайта XML, до 500 страниц. Более чем достаточно.

3. В поле "URL сайта" введите адрес вашего сайта.

4. Введите проверочный код, и нажмите кнопку старт.

5. После того как сканирование будет завершено, нажмите на ссылку "скачать Sitemap".

Скачанный файл необходимо переименовать в "sitemap". После остаётся закинуть его в корень сайта и сообщить адрес поисковикам.

2.4. Как добавить карту сайта в поисковые системы

Чтобы добавить sitemap на сайт, необходимо проделать следующие шаги:

1. Для соединения с сервером потребуется любой FTP-клиент. В примере будет использоваться FileZilla. Откройте программу и внесите необходимые данные для соединения с сервером по FTP:

Эту информацию можно получить от хостинг-провайдера.

1. Зайдите в корневую папку вашего сайта (папку, где лежат все файлы ресурса) и добавьте туда ваш sitemap.xml. Это можно сделать двойным щелчком мыши или просто при помощи переноса файла в соседнее окно. На вопрос о замене существующего файла, выбираем заменить.

2. Далее заходите в браузер по адресу site.ru/sitemap.xml и проверяете нахождение необходимого файла. Если по данному адресу нет вашего sitemap.xml, возможно вы переместили его не в ту папку, или просто необходимо обновить страницу.

2.5. Добавляем sitemap в Яндекс

Чтобы сообщить поисковому роботу Яндекс о наличии на вашем сайте файла sitemap.xml существует два наиболее эффективных способа:

1. Добавить sitemap через robots.txt. Для этого необходимо внести изменение в данный файл, дописав директиву:

Sitemap: ваш_сайт/sitemap.xml

2. Добавить sitemap через Яндекс.Вебмастер. Для этого способа должны быть подтверждены права на управление сайтом.

Заходим в панель вебмастера Яндекс , переходим на нужный сайт и во вкладке «Настройка индексирования» выбрать «Файлы Sitemap».

Для наиболее быстрого достижения эффекта рекомендуется совершить оба действия.

2.6. Добавляем sitemap в Google

Сделать, это можно следующим образом, заходите "Сканирование", нажимаете "Файлы Sitemap":

в правом верхнем углу кликаем на красную кнопку "Добавление/проверка файла Sitemap". В открывшееся окошко вписываем sitemap.xml. А затем, перед отправкой карты блога, лучше её проверить на наличие ошибок, поэтому жмём кнопочку Проверить файл Sitemap:

После появится сообщение "Проверка завершена", "Просмотреть результаты проверки". Смотрим, если ошибок нет, тогда картинка будет такая:

Вот, дорогие друзья и весь процесс. А я на этом с вами прощаюсь, не надолго. Очень надеюсь, что инструкция для вас будет полезна. Удачи и всего хорошего.

16.08.2018

Здравствуйте!

На связи Илья Журавлёв и сегодня я расскажу вам и покажу — как создать для своего сайта файл sitemap . Что это такое? если говорить своими словами, то файл sitemap предназначен для помощи поисковым системам в индексировании вашего сайта. То есть в данном файле указывается конкретный список страниц и записей вашего сайта, которые должен проиндексировать поисковый робот.

Смотрите, например поисковый робот зашёл на ваш сайт, а у вас там — Бардак! всё смешано, навалено всё в кучу, много разных прибамбасов на сайте. И в таком хаосе роботу сложно правильно индексировать ваш сайт, в таких условиях он может что-то пропустить. Для этого и нужен файл sitemap.xml — где будут указаны только страницы и записи, которые нужно проиндексировать, без лишнего мусора.

Вот что пишет Google о файле sitemap.

Итак, создавать файл sitemap.xml, мы будем с помощью плагина — Google XML Sitemaps . Установить данный плагин вы сможете прямо из своей админ-панели wordpress. Перейдите по вкладке: Плагины — Добавить новый , введите название плагина в форму поиска, нажмите Enter, установите и активируйте найденный плагин.

Чтобы попасть на страницу настроек плагина, перейдите по вкладке: Настройки — XML Sitemap .

А теперь разберём настройки.

Search engines haven’t been notified yet , здесь можно посмотреть и открыть файл sitemap.xml в браузере. На остальную информацию в данном окне можно не обращать внимание так как она не важна.

Переходим к — Базовым Параметрам .

— Уведомить Google об изменениях в Вашем дневнике , здесь ставим галочку.

— Notify Bing (formerly MSN Live Search) about updates of your Blog , здесь то же ставим галочку, чтобы уведомить поисковую систему Bing.

— Add sitemap URL to the virtual robots.txt file , если вы используете файл robots.txt , то здесь галочку ставить не нужно.

— Расширенные параметры , оставляем поля пустыми, а это значит по умолчанию.

— Try to automatically compress the sitemap if the requesting client supports it , оставьте здесь галочку, но если при проверке файла будут выдаваться ошибки, то отключите данную функцию. Данная функция позволяет сжать файл sitemap.xml

— Включить таблицу стилей XSLT , оставьте данное поле пустым, а в конце предложения должна стоять галочка, то есть использовать по умолчанию.

— Override the base URL of the sitemap , оставляем данное поле пустым. Данная функция предлагает сделать переадресацию на другой URL.

— Include sitemap in HTML format , здесь ставим галочку, чтобы карта отображалась в формате HTML .

— Allow anonymous statistics (no personal information) , здесь галочку ставить не нужно. Ставя здесь галочку вы разрешаете доступ к анонимной информации, если она у вас есть.

Дополнительные страницы . Здесь вы можете указать файлы или URL адреса, которые должны быть включены в файл sitemap.xml, но которые не принадлежат вашему сайту или блогу. Чтобы добавить новую страницу, нажмите на вкладку — Добавить новую страницу .

Приоритет статьи . Здесь можно указать использовать ли приоритет для записей на вашем сайте. Лично я указал у себя не использовать вычисление приоритета, чтобы все статьи были равноценны. То есть у меня нет такого, что какая то статья важная, а какая-то не важная, у меня на сайте всё важно.

Содержание карты сайта . Здесь нужно указать какие страницы будут включены в файл sitemap.xml. По умолчанию будут отмечены основные страницы — Домашняя страница, статьи и статические страницы сайта. Я так же рекомендую оставить по умолчанию, как есть. Категории, архивы, страницы авторов, страницы меток — отмечать не стоит, так как это лишний груз.

— Further options, здесь ставим галочку , чтобы сообщать поисковикам при изменении содержании файла.

Excluded items . Если вы включили в файл sitemap категории, то можно здесь исключить некоторые из них. Так же здесь можно исключить определённые страницы, указав в поле их ID .

Изменить частоты . Здесь можно указать частоту осмотра страниц. Но обратите внимание на предисловие, что это не является командой для поисковых роботов, а лишь рекомендацией. Я указал для всех каждый день. Для страниц которые не включены в файл sitemap, можно ничего не указывать.

Приоритеты . Если в начале настроек вы указали не учитывать приоритеты, то можно здесь ничего не указывать. Но а если приоритеты для вас важны, то укажите их для страниц которые включены в файл sitemap. Если для вас всё важно и вы не хотите ничего выделять, то ставьте одинаковые приоритеты.

В конце жмём — Обновить параметры . На этом всё, плагин настроен, больше вам ничего делать не нужно. Если у вас остались вопросы, то пишите мне. До новых встреч!

СМОТРИ ТАКЖЕ

Добрый день, дорогие читатели блога сайт. Сегодня я решил рассказать вам про плагин Google XML Sitemaps, который помогает улучшить взаимопонимание между вами и Сложно представить в нынешних реалиях вебмастера, который пренебрегал бы такой возможностью.

Ведь не секрет, что современные проекты в интернете направлены на максимальное привлечение новых читателей на свой ресурс. В этом им как раз и помогает этот плагин, который в автоматическом режиме обновляет файл sitemap.xml при добавлении новых статей на ваш сайт.

Давайте более подробно разберем, как установить данный плагин и как правильная настройка Google XML Sitemaps позволит вам увеличить скорость индексирования ваших статей, а это очень важный момент в блогинге.

Итак, чтобы установить данный плагин, перейдите в административную панель WordPress и во вкладке «Плагины» (1) нажмите «Добавить новый» (2).

На открывшейся странице в поле «Поиск плагинов» введите Google XML Sitemaps и нажмите «Enter».

В результате поиска нажмите кнопку «Установить» как показано на картинке ниже.

Спустя несколько секунд вы увидите, что плагин успешно установлен. Нажмите на активное поле с надписью «Активировать плагин».

На этом установка завершена. Как вы видите, поиск и активация плагина аналогичны плагинам, про которые я рассказывал и . Кто еще не читал эти статьи — прочитайте обязательно! Думаю, они окажутся вам полезны.

Настройка Google XML Sitemaps

Чтобы настроить данный плагин под себя, перейдите во вкладку «Плагины» и в описаниях его нажмите «Settings».

Базовые параметры

В открывшемся окне в меню «Базовые параметры» находится 6 подменю.

Давайте более подробно разберем, что именно обозначает каждое из них.

• Первые два пункта обозначают, что вы соглашаетесь на уведомление поисковых систем Google и Bing об изменениях в вашем блоге.
• Третий пункт позволяет добавить адрес карты сайта в виртуальный . Честно говоря, до конца я так и не понял, для чего это нужно, а на просторах интернета бытует два мнения, что нужно оставить активным и убрать галочку. Их-за того, что по умолчанию данный пункт стоит активным, я решил примкнуть к первой группе пользователей и не стал ничего менять.
• Следующие два пункта «Попытаться увеличить лимит памяти» и «Попытаться увеличить ограничение времени использования» нужны для уменьшения нагрузки на ваш сайт. В основном это может быть полезно людям с большим количеством статей, картинок, видео и аудио. Эти настройки делаются индивидуально под каждый проект, изменив которые, вы можете и навредить своей индексации статей. Я бы советовал вам оставить данный пункт без внимания.
• Пункт «Try to automatically compress the sitemap….» я также оставляю неактивным.
• Следующий пункт «Include sitemap in HTML» позволяет сделать вашу карту сайта доступной и в HTML формате.
• Последний пункт данного меню «Allow anonymous statistics» разрешает анонимную отправку статистики без передачи персональных данных. Я у нас запретил.

Дополнительные страницы

Следующее меню с наименьшим количеством настроек — это «Дополнительные страницы».

Оно позволяет добавить в вашу карту сайта сторонние страницы, то есть не принадлежащие вашему блогу.

Приоритеты статей

Следом расположено меню «Приоритеты статей».

Я советую выбрать первый пункт, так как это означает, что ни одна статья размещённая на вашем сайте не будет получать приоритет в процессе размещения ее в XML карте. На самом деле приоритет не имеет какого-либо решающего значения в индексации и расчет количества комментариев будет создавать лишь лишнюю нагрузку на ваш сервер.

• Тут отмечаем галочкой те виды страниц, которые попадут в вашу карту. По умолчанию программой выбраны первые три пункта. Я бы советовал вам поставить галку еще и напротив четвертой строчки «Включить категории». Это связано с тем, что страницы категории являются дополнительной точкой входа посетителей из поисковых систем. Было бы глупо от них отказываться. Не правда ли?
• Последний пункт «Include the last….» добавляет дату и время последних изменений к записям. Эту информацию поисковики используют для своевременных изменений в выдаваемых страницах.

Excluded categories

Следующий раздел — это «Excluded categories».

В данном пункте можно исключить любые категории из создаваемой карты или же отдельные статьи, введя их идентификатор через запятую в нижнем поле.

Напомню, что идентификатор вы можете посмотреть перейдя в меню «Записи» в админке WordPress. Далее, наведя курсор на нужную вам статью, в левом нижнем углу вашего браузера, вы увидите интересующий вас числовой идентификатор.

Изменить частоты

Следующее меню « Изменить частоты».

Оно дает возможность задания частоты сканирования поисковыми роботами вашего контента. Больше всего мне понравилась честность и открытость разработчиков данного сервиса. Они в шапке указывают, что заданные значения не являются приоритетными для поисковиков. Это значит, что несмотря на заданные значения поисковики будут посещать ваши страницы в то время, когда им захочется.

Приоритеты

Ну и последний пункт настроек «Приоритеты».

Тут можно выставить приоритеты от 0 до 1 для каждого пункта. У себя я не стал ничего трогать и оставил по умолчанию.

На этом настройка данного сервиса закончена, жмем «Обновить параметры» и не забываем добавить Sitemap.xml в поисковики. Как это сделать я расскажу в одной из следующих статей. Так что , чтобы не пропустить ее выход.

Пожалуй, на сегодня буду заканчивать. Если будут вопросы, не стесняемся — пишем в комментариях.

Видео «Как установить и настроить плагин Google XML Sitemaps»

В видео я подробно все рассказываю и показываю на конкретном примере. Так что желаю приятного, а главное — полезного просмотра. А еще рекомендую подписаться на наш youtube-канал, там много интересного!

Интересно, как вы создаете карту сайта? Делитесь своим опытом!

Антон Калмыков

Здравствуйте!

На связи Илья Журавлёв и сегодня я расскажу вам и покажу – как создать для своего сайта файл sitemap . Что это такое? если говорить своими словами, то файл sitemap предназначен для помощи поисковым системам в индексировании вашего сайта. То есть в данном файле указывается конкретный список страниц и записей вашего сайта, которые должен проиндексировать поисковый робот.

Смотрите, например поисковый робот зашёл на ваш сайт, а у вас там – Бардак! всё смешано, навалено всё в кучу, много разных прибамбасов на сайте. И в таком хаосе роботу сложно правильно индексировать ваш сайт, в таких условиях он может что-то пропустить. Для этого и нужен файл sitemap.xml – где будут указаны только страницы и записи, которые нужно проиндексировать, без лишнего мусора.

Вот что пишет Google о файле sitemap.

Итак, создавать файл sitemap.xml, мы будем с помощью плагина – Google XML Sitemaps . Установить данный плагин вы сможете прямо из своей админ-панели wordpress. Перейдите по вкладке: Плагины – Добавить новый , введите название плагина в форму поиска, нажмите Enter, установите и активируйте найденный плагин.

Чтобы попасть на страницу настроек плагина, перейдите по вкладке: Настройки – XML Sitemap .

А теперь разберём настройки.

Search engines haven’t been notified yet , здесь можно посмотреть и открыть файл sitemap.xml в браузере. На остальную информацию в данном окне можно не обращать внимание так как она не важна.

Переходим к – Базовым Параметрам .

– Уведомить Google об изменениях в Вашем дневнике , здесь ставим галочку.

– Notify Bing (formerly MSN Live Search) about updates of your Blog , здесь то же ставим галочку, чтобы уведомить поисковую систему Bing.

– Add sitemap URL to the virtual robots.txt file , если вы используете файл , то здесь галочку ставить не нужно.

– Расширенные параметры , оставляем поля пустыми, а это значит по умолчанию.

– Try to automatically compress the sitemap if the requesting client supports it , оставьте здесь галочку, но если при проверке файла будут выдаваться ошибки, то отключите данную функцию. Данная функция позволяет сжать файл sitemap.xml

– Включить таблицу стилей XSLT , оставьте данное поле пустым, а в конце предложения должна стоять галочка, то есть использовать по умолчанию.

– Override the base URL of the sitemap , оставляем данное поле пустым. Данная функция предлагает сделать переадресацию на другой URL.

– Include sitemap in HTML format , здесь ставим галочку, чтобы карта отображалась в формате .

– Allow anonymous statistics (no personal information) , здесь галочку ставить не нужно. Ставя здесь галочку вы разрешаете доступ к анонимной информации, если она у вас есть.

Дополнительные страницы . Здесь вы можете указать файлы или URL адреса, которые должны быть включены в файл sitemap.xml, но которые не принадлежат вашему сайту или блогу. Чтобы добавить новую страницу, нажмите на вкладку – Добавить новую страницу .

Приоритет статьи . Здесь можно указать использовать ли приоритет для записей на вашем сайте. Лично я указал у себя не использовать вычисление приоритета, чтобы все статьи были равноценны. То есть у меня нет такого, что какая то статья важная, а какая-то не важная, у меня на сайте всё важно.

Содержание карты сайта . Здесь нужно указать какие страницы будут включены в файл sitemap.xml. По умолчанию будут отмечены основные страницы – Домашняя страница, статьи и статические страницы сайта. Я так же рекомендую оставить по умолчанию, как есть. Категории, архивы, страницы авторов, страницы меток – отмечать не стоит, так как это лишний груз.

– Further options, здесь ставим галочку , чтобы сообщать поисковикам при изменении содержании файла.

Excluded items . Если вы включили в файл sitemap категории, то можно здесь исключить некоторые из них. Так же здесь можно исключить определённые страницы, указав в поле их .

Изменить частоты . Здесь можно указать частоту осмотра страниц. Но обратите внимание на предисловие, что это не является командой для поисковых роботов, а лишь рекомендацией. Я указал для всех каждый день. Для страниц которые не включены в файл sitemap, можно ничего не указывать.

Приоритеты . Если в начале настроек вы указали не учитывать приоритеты, то можно здесь ничего не указывать. Но а если приоритеты для вас важны, то укажите их для страниц которые включены в файл sitemap. Если для вас всё важно и вы не хотите ничего выделять, то ставьте одинаковые приоритеты.

В конце жмём – Обновить параметры . На этом всё, плагин настроен, больше вам ничего делать не нужно. Если у вас остались вопросы, то пишите мне. До новых встреч!

Как настроить плагин Google XML Sitemaps обновлено: Май 15, 2018 автором: Илья Журавлёв

Для более глубокого понимания того, как создавать сайты и зарабатывать на них, рекомендую ознакомится с предыдущими статьями данного цикла:

Где взять плагин «Google xml sitemap»?

Хочется сразу заметить, что данный плагин является абсолютно бесплатным и . Вот ссылка на плагин! Хотите узнать, как установить плагин без скачивания файлов на свой компьютер?

Установка плагина «Google xml sitemap».

Конечно, можно скачать плагин к себе на компьютер и уже далее установить его с компьютера к себе на сайт. Но есть способ намного проще.
Заходим в админ панель и проделываем следующие действия:

— Заходим в раздел «Плагины»
— Выбираем «Добавить новый»
— Далее в поле «Поиск плагинов» вводим название интересующего нас плагина
«Google Xml Sitemap»
— Нажимаем кнопку «Установить»

После установки нажимаем «активировать плагин».
Теперь нам осталось только произвести его настройку.

Настройка плагина «Goole xml sitemap»

Для того, чтобы произвести настройку данного плагина, нам необходимо в первую очередь зайти в раздел «Настройки» и выбрать «XML - sitemap».

Перед Вами откроется несколько блоков. Все, что Вам нужно будет сделать, это выставить настройки по аналогии, как у меня (возможно они у Вас будут выставлены таким образом автоматически).


Тут мы даем указание плагину уведомлять поисковые системы Google и Bing об изменениях, которые произошли у нас на сайте.

Еще один важный момент! Обязательно обратите внимание на блок, в котором будет указано, что именно отображать в карте сайта! Все должно выглядеть именно так:

Все остальные настройки можно оставить как есть. После того, как вы произвели настройку плагина, обязательно перейдите по ссылке http://ваш_домен.ru/sitemap.xml. Если все сделано верно, то Вы увидите перед собой карту Вашего сайта. Выглядеть она должна у Вас примерно вот так:

Всегда помните о том, что сайт мы делаем в первую очередь не для поисковых роботов, а для людей! Возможно, с технической стороны на Вашем сайте и могут быть какие-то ошибки, но содержание должно быть идеальным!

Успехов в развитии Вашего бизнеса на сайтах!