Как сайт терял трафик из Яндекса: детективная история с краулером

66
02.12.2024
Avatar
Роман Ковалёв
Совладелец рекламного агенства “Ковалевы”

К нам в агентство обратился владелец интернет-магазина. По его словам, с сентября 2023 года сайт стал получать все меньше трафика из Яндекса. В поисках причины были проверены все стандартные метрики: позиции, апдейты алгоритмов, ссылочный профиль — но ничего подозрительного не нашлось.

При первичном сканировании сайта через To-scan мы обнаружили интересную деталь: на сайте использовался кастомный редирект через JS. Для Яндекса такие редиректы менее прозрачны, чем для Google, и могут восприниматься как попытка клоакинга.

При более детальном анализе выяснилось:

  • Редирект был внедрен в сентябре при обновлении системы защиты от ботов
  • Затрагивал около 40% страниц каталога
  • Google умел корректно обрабатывать такой тип редиректа
  • Яндекс воспринимал это как технический барьер

Динамика трафика полностью подтверждала находку:

  • Яндекс: падение с 2500 до 500 визитов в день
  • Google: стабильные показатели без сильных изменений

После исправления механики редиректа на стандартный 301 трафик из Яндекса начал постепенно восстанавливаться и к осени 2024 достиг отметки в 800-900 визитов ежедневно.

Мораль истории: иногда причина проблем с трафиком кроется в неочевидных технических решениях, и только глубокий технический анализ помогает их обнаружить.