🧐 Пять лет назад мы удалили старые страницы каталога. Bing пришёл за ними в 2026-м

Друзья, продолжаем #seoразбор. Сегодня про неожиданные мувы от поисковых систем... В общем, лет пять урлы проекта никак себя не проявляли - ни трафика, ни ошибок. Про них не вспоминали, потому что вспоминать было не о чем - структура каталога изменилась при редизайне, ссылки вычистили, страницы отдавали 410 и лежали мёртвым грузом.

Потом ИИ начали собирать корпуса и заново обходить веб, и краулеры полезли туда, куда годами не заглядывали.. 😅

✔ Что мы увидели в логах ✔Пласт из ~500 URL, которых нет нигде: ни в меню, ни в фильтрах, ни в sitemap, ни во внутренних ссылках. Проверили - это структура каталога до редизайна. Пятилетней давности.

✔Обход идёт двумя ботами: Bingbot и Googlebot Smartphone. Десктопный Googlebot по этим адресам не заходит вообще - по нему нули во всех строках. Код ответа сервера - 410.

📎 Google Search Console по тем же разделам каталога показывает свой отчёт. Два разных кода на один пласт URL - повод отдельно проверить конфигурацию.

🤓 Почему это важно именно сейчас. Bing раньше был для рунета фоновым шумом (для мелких проектов и сейчас тоже). Трафика почти нет, что там в его индексе - пофиг. Сейчас на этот индекс опирается часть ИИ-ассистентов, когда ищет информацию для ответа. Google параллельно тянет то же самое в свои ИИ-ответы.

Разница в том, что поисковик показывает ссылку, а ассистент пересказывает содержимое. Мёртвая страница из индекса перестала быть строчкой в отчёте - она стала потенциальным источником фактов о компании.

Вы почистили сайт, но не почистили то, что о сайте помнят.

✔Отдельно про 410. Это довольно четкий сигнал краулеру: «удалено навсегда, не возвращайся».

В итоге - сопоставили старые ID категорий с новыми и настроили 301 редиректы на актуальные страницы каталога. Тут логика простая: раз боты всё равно приходят по этим адресам, пусть каждый дойдёт до живой страницы и заберёт актуальный контент, а не упрётся в пустой ответ.

🧑‍💻 Что забрать себе. Индекс - не всегда "зеркало сайта". Пока архивом никто не пользовался, его содержимое ничего не стоило. Теперь на нём учатся и по нему отвечают.

И второе: этих страниц не было ни в GSC-обзоре, ни в краулере, ни в аналитике. Их видно только в логах. Мы не нашли новую проблему - мы нашли проблему, которая лежала пять лет и стала проблемой, когда изменился рынок. Делайте на все устаревшие лучше 301, чтобы мусор не уходил в ИИ.

Всем лидов ❤️