Наша команда-партнер Artmisto
Для сканирования сайтов это способ Sitemaps использовать. Эти карты сайта можно отправить в Google, что позволит поисковой системе находить и загружать интересный контент с веб-страницы.
Другой вариант - использовать RSS / Atom-каналы. Основное различие между фидами Sitemaps и Atom заключается в том, что файлы Sitemap определяют общее количество URL-адресов веб-страницы / домена и описывают самые последние изменения.
- Файлы Sitemap больше, чем каналы RSS / Atom.
- Файлы Sitemap загружаются реже
Для оптимального ползания рекомендует Google использование карт сайта и каналов. Потому что файлы Sitemap дают Google всю информацию об URL-адресах веб-сайта, а фиды обеспечивают поисковую систему постоянными обновлениями. Но использование только карты сайта и канала не гарантирует индексацию контента.
Пример карты сайта
<? xml version = "1.0" encoding = "utf-8"?> <urlset xmlns = "http://www.sitemaps.org/schemas/sitemap/0.9"> <url> <loc> http: // example .com / mypage </ loc> <lastmod> 2011-06-27T19: 34: 00 + 01: 00 </ lastmod> <! - необязательные дополнительные теги -> </ url> <url> ... </ url> </ urlset>
Пример RSS-канала
<? xml version = "1.0" encoding = "utf-8"?> <rss> <channel> <! - другие теги -> <item> <! - другие теги -> <link> http: / /example.com/mypage </ link> <pubDate> Пн, 27 июня 2011 г. 19:34:00 +0100 </ pubDate> </ item> <item> ... </ item> </ channel> </ rss >
Пример подачи атома
<? xml version = "1.0" encoding = "utf-8"?> <feed xmlns = "http://www.w3.org/2005/Atom"> <! - другие теги -> <entry> < link href = "http://example.com/mypage" /> <обновлено> 2011-06-27T19: 34: 00 + 01: 00 </ updated> <! - другие теги -> </ entry> < entry> ... </ entry> </ feed>
Распространенные ошибки:
Распространенная ошибка при использовании файлов Sitemap и каналов: URL-адреса запрещены в Robots.txt, поэтому Google не может сканировать их, даже если URL-адрес находится в карте сайта. Чтобы проверить это, вы можете получить новый Robots.txt Tester использовать.
Эй, это может вас заинтересовать
Encoding = "utf-8"?Encoding = "utf-8"?
Encoding = "utf-8"?