Check robots.txt and sitemap.xml
Проверим, отдаёт ли сайт robots.txt и карту сайта, нет ли ошибок в XML и сколько URL попало в sitemap.
How to read the result
- robots.txt должен открываться с кодом 200 и быть текстом, не HTML-заглушкой хостинга.
- Директива Sitemap: в robots помогает поисковику найти карту. Если её нет — проверим /sitemap.xml.
- В urlset считаем теги <loc>. Пустая карта или битый XML — частая причина, почему страницы не индексируются.
- sitemapindex — это список карт, а не страниц. Тогда смотрим число вложенных sitemap, а не URL.
Индексация есть, а лиды с сайта запаздывают?
Пока поисковик обходит страницы, заявки уже можно вести в Telegram — менеджер отвечает в тот же час.
Track store prices in the product PriceTrack.