Вы открываете Яндекс.Метрику и видите всплеск прямых заходов: отказ 100%, время на сайте 0 секунд, а заявок нет. Скорее всего, это боты. Они портят статистику и мешают оценивать рекламу и SEO. Расскажем, как их найти и что с ними делать.
Быстрая проверка без ручной работы: бесплатный инструмент «Сколько ботов в вашей Метрике» сам выгрузит визиты счётчика и покажет долю трафика из датацентров и облаков, подозрительные сети и прямые заходы с отказом за 0 секунд.
Признаки роботов в статистике
- всплеск прямых заходов без источника и без перехода с другого сайта;
- отказы 100% и время на сайте 0 секунд;
- заходы из одного провайдера или региона, который не совпадает с вашей аудиторией;
- одинаковое разрешение экрана и версия браузера у сотен визитов;
- заходы на одну страницу или на несколько страниц с одинаковым интервалом.
В Метрике есть признак «Роботы», по которому часть ботов отфильтровывается автоматически. Но он ловит только известных роботов, а современные боты притворяются обычными браузерами и в этот отчёт не попадают.
Как найти источник
- В отчёте по визитам добавьте группировку по провайдеру и по IP-адресу: бот-трафик часто идёт из одной сети.
- Проверьте найденный адрес в справочнике владельцев сетей (ASN): датацентр или облако, а не домашний провайдер, указывает на бота.
- Сравните User-Agent: у ботов одной сети он обычно повторяется.
На нашем сайте именно так нашли сегмент «Роботов»: прямые заходы без источника с адресов Tencent Cloud (AS132203), отказ 100%, время на сайте 0 секунд. Старая защита проверяла только User-Agent, а этот трафик пришёл с обычными браузерными строками.
Что делать
Фильтры в отчётах
Можно создать сегмент без подозрительных провайдеров и смотреть аналитику по нему. Это скрывает проблему в отчётах, но боты по-прежнему ходят на сайт и нагружают сервер.
Блокировка на сервере
Надёжнее остановить ботов до того, как они попадут в статистику. Сервис защиты проверяет заход по User-Agent, IP, провайдеру и поведению и отсекает мусор. Так в статистике остаются только люди.
У bot-guard.ru за последние 30 дней в Метрике 102 прямых захода, а за предыдущие 30 дней было 6 598, почти все из них боты. Мы включили защиту на собственном сайте, и статистика очистилась.
Как не заблокировать нужных роботов
Нельзя просто закрыть все роботные User-Agent: вместе с мусором исчезнут Googlebot и YandexBot, а с ними и позиции. Настоящих поисковых роботов подтверждают обратной DNS-проверкой, а подделки блокируют. Подробнее о способах защиты в статье защита сайта от ботов: как работает и как выбрать сервис.
Если нужно подключить защиту и настроить её под ваш сайт на 1С-Битрикс, WordPress или самописной системе, обращайтесь в oWeb Solutions: мы разработали bot-guard и внедряем его клиентам.
Данные о том, какие боты реально ходят на сайты (поисковые, ИИ-краулеры, вредные), смотрите в исследовании Bot Guard за 30 дней.
Защитите свой сайт от ботов прямо сейчас
Подключение занимает несколько минут — вставьте один PHP-сниппет, и Bot Guard начнёт фильтровать ботов, скрейперов и попытки SQL-инъекций автоматически.