База проверок · Стандарт надёжности Кохаб
Сайт должен быть доступен для обхода в рамках проверки
Внутренний стандарт сервиса, не закон: наше минимальное требование к сайту.
Что требуется
Незначительно
без обхода нельзя проверить документы, формы, ссылки, статусы страниц и доказательства. Применимость: публичным сайтам, которые ожидают проверки Кохаб или видимости в поисковых системах. Нарушение для Кохаб фиксируется только по публичным признакам: robots.txt, sitemap.xml, редиректы, ошибки или блокировки мешают найти и открыть основные публичные страницы.
Кому применимо
публичным сайтам, которые ожидают проверки Кохаб или видимости в поисковых системах.
Когда мы это проверяем: сайт должен быть публично обходимым для проверки Кохаб или поисковой видимости.
На чём основано
внутренний стандарт Кохаб
внутренний стандарт Кохаб требует достаточный обход публичных страниц для проверки документов, форм, ссылок и доказательств.
Что считается несоответствием
robots.txt, sitemap.xml, редиректы, ошибки или блокировки мешают найти и открыть основные публичные страницы.
Не считается несоответствием: закрытые разделы личного кабинета и административные URL.
Примеры: robots.txt запрещает весь сайт, включая страницы с юридическими документами — нарушение.
Чем грозит
Без файла robots.txt, карты сайта и полной проверки часть страниц не попадает ни в проверку, ни в поиск: поисковые системы (Яндекс, Google) хуже находят страницы сайта, а результат проверки может быть неполным.
При FAIL карточка показывает конкретный публичный пробел: обход ключевых страниц заблокирован. Риск подтверждается только при применимости требования и наличии доказательств crawler-а.
Как мы это проверяем
crawler анализирует robots.txt, sitemap.xml, внутренние ссылки, глубину обхода и причины пропуска страниц.
Какие подтверждения собираем: crawler анализирует robots.txt, sitemap.xml, внутренние ссылки, глубину обхода и причины пропуска страниц. Минимальный набор фактов: robots.rules.*, sitemap.urls.*, crawler.discovered_pages.*, crawler.blocked_pages.*. Карточка finding должна ссылаться на URL/скриншот/текстовый фрагмент, из которого сделан вывод.
Число страниц в карте сайта — Считает, сколько адресов страниц сайт заявляет в файле /sitemap.xml, включая вложенные карты. Страницы при этом не обходятся — только счёт.
Число найденных страниц — Считает уникальные адреса страниц, которые обход увидел по ссылкам сайта, включая страницы, не вошедшие в бюджет обхода.
Как исправить
Попросите того, кто занимается вашим сайтом, добавить файл robots.txt с инструкциями для поисковых систем и карту сайта (sitemap) со списком всех страниц. Если проверка прошла не до конца — запустите её заново.
Статусы проверки
Зелёная карточка
основные публичные страницы доступны для обхода.
Жёлтая карточка
карта сайта отсутствует или часть страниц плохо связана.
Красная карточка
обход ключевых страниц заблокирован.
Проверка неприменима
ресурс не предназначен для публичного обхода.
Какие проверки закрывают требование
-
На сайте нет файла с инструкциями для поисковиков (robots.txt)
проверяем автоматически
-
На сайте нет карты сайта
проверяем автоматически
-
Проверка сайта не завершилась полностью
проверяем автоматически
-
cply.infra.robots.blocks_public_pages
проверка готовится
-
cply.infra.sitemap.missing
проверка готовится
-
cply.infra.crawl_blocked
проверка готовится
Документ и редакция
Внутренний стандарт Кохаб: доступность и индексируемость сайта · редакция v2 от 2026-07-24