Soft 404: почему страница с кодом 200 выпадает из индекса

Сервер отвечает 200 OK, хотя товара, статьи или результата поиска уже нет. По содержимому Google распознает пустой ответ как soft 404.

Отдавайте честный статус

Несуществующий URL должен вернуть 404 или 410 и понятную пользователю страницу ошибки с рабочим поиском, навигацией и ссылкой на подходящий раздел сайта. Полезная навигация в шаблоне допустима, пока HTTP response остается корректным.

Проверьте загрузку основного блока

Ошибка базы, пропавший server-side include или неисполненный JavaScript способны оставить оболочку без контента после успешной загрузки шапки, рекламы и общей навигации. Для робота такой документ выглядит исчезнувшим, хотя браузер получил успех.

Не перенаправляйте все на главную

Redirect уместен при наличии близкой замены. Массовый переход нерелевантных адресов на homepage создает новый вариант soft 404, смешивает разные причины удаления и мешает увидеть настоящие потери в каталоге.

Выберите десять примеров из Page Indexing report, скачайте ответы напрямую и сравните видимый основной блок без выполнения клиентских скриптов в обычном браузере. Исправление подтверждается кодом, содержимым и повторным обходом, а не исчезновением предупреждения за одну ночь.

Удаление URL связано с материалом про robots.txt и noindex. Источник: диагностика Google.