XML Sitemap Generator

  1. Как создать XML Sitemap с помощью SEO Spider Из этого туториала Вы узнаете, как использовать SEO-паука...
  2. 2) Нажмите «Sitemaps> Создать XML Sitemap».
  3. 3) Выберите «Страницы», чтобы включить
  4. 4) Исключить страницы из XML Sitemap
  5. 5) Выберите дату последнего изменения
  6. 6) Выберите «Приоритет» URL
  7. 7) Выберите «Изменить частоту» URL-адресов.
  8. 8) Выберите изображения для включения в карту сайта
  9. 9) Включите hreflang
  10. 10) Нажмите «Далее», чтобы создать XML Sitemap.
  11. Отправить свой XML Sitemap в Google
  12. Вставьте запись файла Sitemap в файл Robots.txt

Как создать XML Sitemap с помощью SEO Spider

Из этого туториала Вы узнаете, как использовать SEO-паука Screaming Frog для создания XML-файлов Sitemap. Чтобы начать, вам нужно скачать SEO паук Это бесплатно в облегченной форме, до 500 URL. Вы можете скачать с помощью кнопок в правой части панели.

Если вы хотите сканировать более 500 URL-адресов, вы можете купить годовую лицензию , который удаляет ограничение сканирования и открывает параметры конфигурации.

Следующие шаги для создания XML Sitemap следующие:

1) сканировать сайт

Откройте SEO Spider, введите или скопируйте на веб-сайте, который вы хотите сканировать, в поле «введите URL для паука» и нажмите «Пуск».

Откройте SEO Spider, введите или скопируйте на веб-сайте, который вы хотите сканировать, в поле «введите URL для паука» и нажмите «Пуск»

2) Нажмите «Sitemaps> Создать XML Sitemap».

Когда сканирование достигнет 100% и завершится, нажмите «Создать XML Sitemap» в разделе «Sitemaps» в меню верхнего уровня.

Когда сканирование достигнет 100% и завершится, нажмите «Создать XML Sitemap» в разделе «Sitemaps» в меню верхнего уровня

Это откроет ряд конфигурация карты сайта опции.

3) Выберите «Страницы», чтобы включить

Только HTML-страницы, включенные во вкладку «internal» с ответом «200» OK от сканирования, будут включены в карту сайта XML по умолчанию. Таким образом, вам не нужно беспокоиться о перенаправлениях (3XX), клиентских ошибках (4XX Errors, например неработающие ссылки ) или ошибки сервера (5XX), включенные в карту сайта. Тем не менее, вы можете включить их по желанию, поскольку в некоторых случаях они могут потребоваться.

Страницы, которые заблокированы файлом robots.txt, установленным как noindex, были «канонизированы» (канонический URL-адрес отличается от URL-адреса страницы), разбиты на страницы (URL с rel = «prev») или PDF-файлы также не входит в стандартную комплектацию. Все это можно настроить в конфигурации страниц XML-файла Sitemap, поэтому просто выберите ваши предпочтения.

Вы можете увидеть, какие URL не имеют ответа, заблокированы, перенаправлены или содержат ошибку на вкладке «Ответы» и с помощью соответствующих фильтров. Вы можете увидеть, какие URL-адреса являются «noindex», «canonicalized» или иметь элемент ссылки rel = «prev» на них на вкладке «Directives», а также с помощью фильтров.

Вы можете увидеть, какие URL-адреса являются «noindex», «canonicalized» или иметь элемент ссылки rel = «prev» на них на вкладке «Directives», а также с помощью фильтров

4) Исключить страницы из XML Sitemap

Помимо указанных выше параметров конфигурации, могут быть дополнительные «внутренние» страницы ответов HTML 200, которые вы просто не хотите включать в файл Sitemap XML.

Помимо указанных выше параметров конфигурации, могут быть дополнительные «внутренние» страницы ответов HTML 200, которые вы просто не хотите включать в файл Sitemap XML

Например, вы не должны включать «дубликаты» страниц в карту сайта. Если на страницу можно попасть по двум разным URL-адресам, например, http://example.com и http://www.example.com (и оба они разрешаются с ответом «200»), то только одна предпочтительная каноническая версия должны быть включены в карту сайта. Вы не должны включать URL-адреса с идентификаторами сессии (вы можете использовать Перезапись URL возможность удалить их во время сканирования), могут быть некоторые URL-адреса с большим количеством ненужных параметров или просто ненужные разделы веб-сайта.

Есть несколько способов убедиться, что они не включены в XML Sitemap -

  • Если есть разделы веб-сайта или URL-пути, которые вы не хотите включать в XML-файл Sitemap, вы можете просто исключать их в конфигурации предварительно сканировать. Поскольку они не будут сканироваться, они не будут включены во внутреннюю вкладку или файл Sitemap XML.
  • Если вы уже сканировали URL-адреса, которые не хотите включать в экспорт XML-файла Sitemap, просто выделите их на «внутренней вкладке» в верхней панели окна, щелкните правой кнопкой мыши и «удалите» их, прежде чем создавать XML-карту сайта.
  • Кроме того, вы можете экспортировать «внутреннюю» вкладку в Excel, отфильтровать и удалить любые ненужные URL-адреса и повторно загрузить файл в режим списка до создания карты сайта XML.

5) Выберите дату последнего изменения

Это совершенно необязательный атрибут, который нужно включить в XML-файл Sitemap, поэтому вы можете снять флажок «включить последний тег», если не хотите указывать дату последней модификации файла. Это просто подсказка поисковым системам, когда страница последний раз обновлялась.

Это просто подсказка поисковым системам, когда страница последний раз обновлялась

Если вы хотите включить «lastmod», просто выберите, хотите ли вы использовать «последний измененный» ответ, предоставленный непосредственно с вашего сервера (и отображаемый в столбце «Last Modified» на вкладке «Internal»), или использовать пользовательская дата.

6) Выберите «Приоритет» URL

«Приоритет» - это необязательный атрибут, включаемый в файл Sitemap XML. Вы можете снять флажок «включить приоритет», если не хотите устанавливать приоритет URL-адресов. Приоритет подсказывает поисковым системам важность URL-адреса относительно других URL-адресов на вашем сайте. Допустимые значения: от 0,0 до наивысшего приоритета 1,0, по умолчанию - 0,5.

Допустимые значения: от 0,0 до наивысшего приоритета 1,0, по умолчанию - 0,5

SEO Spider позволяет вам настроить их на основе «уровня» (глубины) URL-адресов. Вы можете просмотреть «уровень» URL-адресов в столбце «уровень» на вкладке «Внутренние».

Как показано на скриншоте выше, по умолчанию домашняя страница (или начальная страница сканирования) имеет наивысший приоритет «1», уменьшаясь на 0,1 в приоритете с каждым уровнем глубины до 0,5 для уровня 5+. Они могут быть скорректированы по вашему усмотрению.

Помните, что «приоритет» URL не повлияет на их оценку в поисковых системах. «Приоритет» используется для повышения вероятности сканирования и индексации наиболее важных страниц. На самом деле, Google очень хорошо справляется с этим алгоритмически.

7) Выберите «Изменить частоту» URL-адресов.

«Changefreq» - это еще один необязательный атрибут, который «намекает» на то, как часто страница может меняться.

SEO Spider позволяет вам настроить их на основе ответа «последняя модификация» или «уровень» (глубина) URL-адресов. Опция «Рассчитать по последнему измененному заголовку» означает, что если страница была изменена за последние 24 часа, она будет установлена ​​на «Ежедневно», если нет - на «Ежемесячно».

Пожалуйста, помните, это не команды для поисковых систем, а просто «подсказки». По сути, Google будет сканировать URL-адрес так же часто, как он определяет алгоритмически, по любому «указанию», указанному вами в карте сайта XML.

8) Выберите изображения для включения в карту сайта

Совершенно необязательно, включать ли изображения в карту сайта XML. Если установлен флажок «Включить изображения», то все изображения на вкладке «Внутренние» (и вкладка «Изображения») будут включены по умолчанию. Если ваши изображения находятся в CDN, субдомене или размещены снаружи, они будут отображаться на вкладке «внешние» в пользовательском интерфейсе. Вы можете ввести регулярные выражения в конфигурацию, чтобы включить их в XML Sitemap.

Вы можете ввести регулярные выражения в конфигурацию, чтобы включить их в XML Sitemap

Обычно вам не нужно включать в файл Sitemap XML такие изображения, как собственный логотип, разделители или значки профилей в социальных сетях, поэтому вы можете выбрать включение изображений только с определенным количеством ссылок на атрибуты источника, чтобы исключить их.

Часто изображения, такие как логотипы, связаны между собой, в то время как изображения на страницах продукта в качестве примера, которые вы обычно хотите включить, могут быть связаны только один раз или два. На вкладке «Изображения» есть столбец «IMG Inlinks», который показывает, сколько раз на изображение ссылаются, чтобы помочь отрегулировать количество «ссылок», которые могут подходить для включения.

Вы также можете щелкнуть правой кнопкой мыши и «удалить» любые изображения, которые вы не хотите включать, так же, как и любой другой URL.

9) Включите hreflang

Если у вас уже есть настройка hreflang на сайте с помощью атрибутов или заголовка HTTP, вы можете выбрать добавление hreflang в файл Sitemap XML.

Если у вас уже есть настройка hreflang на сайте с помощью атрибутов или заголовка HTTP, вы можете выбрать добавление hreflang в файл Sitemap XML

Обратите внимание - SEO Spider может создавать XML-файлы Sitemap только с hreflang, если они уже присутствуют в настоящее время (в виде атрибутов или через заголовок HTTP). Больше прийти сюда.

10) Нажмите «Далее», чтобы создать XML Sitemap.

Когда вы закончите настройку различных атрибутов и параметров карты сайта, вы можете просто нажать «Далее», чтобы создать файл Sitemap в формате XML. Файл карты сайта не может содержать более 50 000 URL-адресов и не должен превышать 50 МБ без сжатия. Следовательно, если у вас более 49,999 URL, SEO-паук автоматически создаст дополнительные файлы карты сайта и индексный файл карты сайта, ссылающиеся на местоположение карты сайта.

Следовательно, если у вас более 49,999 URL, SEO-паук автоматически создаст дополнительные файлы карты сайта и индексный файл карты сайта, ссылающиеся на местоположение карты сайта

Затем нажмите «Сохранить» в нужном месте на вашем компьютере. Несмотря на то, что это все шаги, необходимые для создания карты сайта XML, мы рекомендуем еще пару шагов!

Отправить свой XML Sitemap в Google

Карта сайта XML теперь готова для отправки в поисковые системы. Мы настоятельно рекомендуем отправить XML Sitemap в Google через Инструменты для веб-мастеров как способ отслеживания индексации.

Мы настоятельно рекомендуем отправить XML Sitemap в Google через   Инструменты для веб-мастеров   как способ отслеживания индексации

Вставьте запись файла Sitemap в файл Robots.txt

Наконец, мы рекомендуем включить следующую строчку в любом месте вашего файла robots.txt, чтобы проинформировать поисковые системы о существовании файлов Sitemap для XML (независимо от того, уже отправили ли вы их в Инструменты Google для веб-мастеров) -

Карта сайта: http://www.example.com/sitemap.xml

Это оно! Надеемся, что приведенное выше руководство поможет проиллюстрировать, как использовать программное обеспечение SEO Spider для создания файла Google XML Sitemap для вашего веб-сайта.

Вы можете прочитать больше о Screaming Frog SEO Spider в нашем Вопросы и ответы а также гид пользователя , Или вы можете задать нам любые вопросы или вопросы, чтобы служба поддержки !