Проверить robots.txt и sitemap.xml
Проверим, отдаёт ли сайт robots.txt и карту сайта, нет ли ошибок в XML и сколько URL попало в sitemap.
Как читать результат
- robots.txt должен открываться с кодом 200 и быть текстом, не HTML-заглушкой хостинга.
- Директива Sitemap: в robots помогает поисковику найти карту. Если её нет — проверим /sitemap.xml.
- В urlset считаем теги <loc>. Пустая карта или битый XML — частая причина, почему страницы не индексируются.
- sitemapindex — это список карт, а не страниц. Тогда смотрим число вложенных sitemap, а не URL.
Индексация есть, а лиды с сайта запаздывают?
Пока поисковик обходит страницы, заявки уже можно вести в Telegram — менеджер отвечает в тот же час.
Следить за ценами в магазинах — в продукте PriceTrack.