Yandex боты используют IP вне официальных диапазонов
Ключевые факты
- 1 Yandex боты используют IP-адреса вне официальных диапазонов.
- 2 Валидация по IP-диапазонам для Yandex может быть ненадежной.
- 3 Проверка PTR-записей является более надежным методом идентификации ботов Yandex.
- 4 Проблема актуальна для сайтов с защитой от ботов, включая Cloudflare.
- 5 Рекомендуется добавлять дополнительные IP/ASN в белые списки или использовать PTR-валидацию.
Пользователи отмечают, что поисковые боты Yandex начали активно краулить с IP-адресов, которые не входят в их официальные диапазоны. Эта ситуация создает проблемы для вебмастеров, использующих валидацию ботов по IP-диапазонам, так как легитимный трафик от Yandex может быть ошибочно заблокирован. В отличие от Google и Bing, у которых IP-адреса ботов стабильно находятся в официальных списках, Yandex демонстрирует иное поведение. Обнаружение таких IP-адресов, как 45.148.65.20, 45.138.0.33 и аналогичных, подтверждается официальным инструментом проверки IP Yandex, что указывает на их принадлежность поисковой системе. Это особенно важно для сайтов с защитой от ботов, например, использующих Cloudflare, так как такие IP могут быть ошибочно классифицированы как нелегитимные, что приводит к блокировке индексации. Рекомендуется добавить дополнительные IP/ASN в белые списки или полагаться на проверку PTR-записей для точной идентификации ботов Yandex.